Бесплатный инструмент Relevator

Проверка robots.txt

Загрузите файл с сайта или вставьте изменённую версию. Анализатор проверит правила отдельно для Яндекса и Google, покажет синтаксические ошибки, конфликты и точно объяснит, разрешён ли обход выбранных URL.

Проверяю доступный лимит…

Адрес сайта или robots.txt

Загрузить с сайта Проверить вставленный текст

URL для проверки доступа По одному URL или относительному пути на строку

Поисковые роботы Yandex YandexImages Googlebot Googlebot-Image Bingbot User-agent: *

Файл должен находиться в корне конкретного протокола, домена и порта. Для проверки черновика укажите домен и вставьте текст — правила будут применены к этому домену без публикации файла.

Что проверяет инструмент

Файл и HTTP

Корневой адрес, коды ответа, редиректы, UTF-8, plain text и лимит 500 КБ.

Правила Яндекса и Google

User-agent, Allow, Disallow, Sitemap, Clean-param, Crawl-delay, неизвестные и устаревшие директивы.

Тестер URL

Показывает выбранную группу, совпавшее правило, номер строки и итоговый доступ для каждого робота.

Инструмент эмулирует выбор наиболее специфичного правила и при равной длине отдаёт приоритет Allow. Это соответствует опубликованной логике Google и стандарту REP; особенности конкретных роботов могут отличаться.