Введите URL сайта, чтобы получить robots.txt, разобрать группы краулеров, найти директивы Sitemap и проверить связанные sitemap XML.
Анализатор показывает, могут ли важные поисковые боты обходить корень сайта, считает URL в sitemap, находит дубли и внешние URL, а также выборочно проверяет sitemap-страницы на 4xx/5xx.