Продвижение товаров и услуг в интернете
sale@seo62.ru
Звоните ПН–ПТ с 09:00 до 18:00

Robots.txt

Robots.txt — это текстовый файл, предназначенный для ограничения доступа поисковым роботам к содержимому на сервере. Дополняет собой стандарт Sitemaps и располагается в корне сайта. В случае с несколькими поддоменами — в корневом каталоге каждого из них.

Применяемый для выборочного управления индексирования того или иного ресурса, какой файл содержит в себе различные инструкции для различных поисковиков. С их помощью можно задавать файлы, каталоги или страницы порталов, которые временно не подлежат индексации. Дополнительно robots.txt помогает определить место расположения файла, а также подвсказывает, какие страницы необходимо проиндексировать изначально.


Начните развивать ваш бизнес в интернете уже сегодня!

Звоните по телефонам +7 (4912) 77-21-09 Рязань и +7 (495) 256-08-59 Москва
или оставьте заявку и получите бесплатную консультацию от нашего специалиста
Ваш персональный менеджер Алексей Токмаков
Наша презентация