Заказать сайт

Как отредактировать файл robots.txt?

Файл robots.txt генерируется системой автоматически и доступен по адресу вида: http://mysite.ukit.me/robots.txt.

Этот файл содержит следующие директивы:

Ручное редактирование файла robots.txt недоступно, изменения в настройках страниц добавляются автоматически.

Пример:

Закройте от индексации страницу контакты и опубликуйте сайт. В файл robots.txt добавится запись:
Disallow: /contacts$

Примечание:

Если в Яндекс.Вебмастере отображается информация о том, что у вас не указана директива «Host», хотя домен прикреплён — подождите некоторое время, пока информация в поисковой системе обновится. Никаких дополнительных действий не требуется.

Помогла ли вам статья?
Статья оказалась полезной для 18 человек