Этот инструмент генерирует валидный файл robots.txt для вашего сайта

(Воспользуйтесь и другими бесплатными сервисами сайта 4seo.biz!)

Регистрируйтесь на форуме сео и веб мастеров

Адрес сайта, для которого генерируется robots.txt
Полностью запретить индексацию сайта? Да Нет
Crawl-delay (задержка индексирования в секундах)сек.


Запреты для всех поисковых роботов
Запретить директории (через запятую)
Запретить файлы (через запятую)


Запрет для картиночных ботов
Полностью запретить индексацию картинок? Да Нет
Запретить директории (через запятую)


Запреты программ скачивания сайтов
(оффлайн браузеры)
Запретить скачивание сайта? Да Нет


Главный сайт для Yandex (директива host)
(Внимание, сайт с префиксом www или без может восприниматься яндексом как разные сайты)
Включить? Да Нет
Главный сайт

Результат

Поместите в свой файл robots.txt следующий текст