Анализ robots.txt и sitemap.xml Анализ robots.txt и sitemap.xml

Анализ robots.txt и sitemap.xml онлайн

Введите URL сайта, чтобы получить robots.txt, разобрать группы краулеров, найти директивы Sitemap и проверить связанные sitemap XML.

Анализатор показывает, могут ли важные поисковые боты обходить корень сайта, считает URL в sitemap, находит дубли и внешние URL, а также выборочно проверяет sitemap-страницы на 4xx/5xx.

Инструмент работает прямо в браузере и подходит для быстрых проверок без установки программ.
Ввод можно очистить и пересчитать заново, что удобно для повторяющихся небольших задач.
Используйте полноэкранный режим, когда нужно больше места для длинного текста, структурированных данных или крупного результата.
Кнопки копирования помогают сразу перенести результат в код, документ или переписку поддержки.
Большинство операций детерминированы: одинаковые входные данные и настройки дают одинаковый результат.
Для чувствительных данных удобнее использовать локальные браузерные инструменты и проверять результат перед отправкой.