Ограничение: 5 раз в сутки для 1 IP. Для Вашего IP осталось [5] раз. Снять ограничение.

C помощью этого инструмента можно получить готовое содержание для файла robots.txt, просто заполнив форму. Полученные данные скопируйте в блокнот, сохраните под названием robots с расширением .txt, и поместите в корневую папку Вашего сайта.

Команды для роботов поисковой системы Yandex

Разрешить роботам Яндекса индексировать все содержание сайта.
Запретить роботам Яндекса индексировать следующие директории или файлы:
Запретить роботам Яндекса индексировать все содержание сайта.

Основное зеркало сайта



Команды для остальных поисковых систем

Выбор поисковой системы
все Rambler Google

Разрешить роботам индексировать все содержание сайта.
Запретить роботам индексировать следующие директории или файлы (например, /admin/, /tmp/page.php, каждая с новой строки):
Запретить роботам индексировать все содержание сайта.

 

Оставить отзыв о работе скрипта

Наверх