Проверка Sitemap

Что делает проверка Sitemap

Инструмент загружает файл sitemap, разбирает его XML и извлекает все URL, которые в нём перечислены. Вы получаете список обнаруженных адресов — то, что sitemap сообщает поисковым системам о вашем сайте.

Sitemap — это XML-файл со списком URL, которые сайт хочет показать поисковым роботам. В нём могут указываться даты последнего изменения и частота обновления страниц. Sitemap помогает поисковикам находить страницы, особенно на больших сайтах или там, где мало внешних ссылок.

Зачем нужен sitemap

Sitemap — это прямой канал связи с поисковыми системами. Он упрощает обнаружение новых и обновлённых материалов и может подсказывать, какие страницы важны. Для крупных или часто меняющихся сайтов аккуратно поддерживаемый sitemap — практичный способ поддержать сканирование.

Sitemap полезен и для диагностики. Если URL отсутствует в sitemap, роботу может быть сложнее его найти. Если же в sitemap попадают адреса, которые не должны индексироваться, — это повод проверить логику генерации. Разбор файла показывает, что на самом деле отправляется поисковикам.

Как читать результат

Инструмент выводит URL, найденные в sitemap. Сверьте список с ожиданиями: важные страницы должны присутствовать, а адреса, которые не должны индексироваться (тестовые версии, страницы с параметрами), — отсутствовать. Ищите дубли и URL, отдающие редиректы: они расходуют краулинговый бюджет впустую.

Sitemap может быть индексным файлом, который ссылается на другие sitemap. Если разобранный файл — это sitemap index, обнаруженные записи могут быть URL дочерних sitemap, а не страниц. Изучите структуру, чтобы понять, что содержит файл. Также проверьте, что URL используют нужный канонический домен и протокол.

Типичные проблемы с sitemap

• Отсутствуют важные страницы. Ключевой контент не попал в sitemap.
• Включены неиндексируемые URL. Тестовые, staging- или параметрические страницы.
• Битые URL. Записи, которые возвращают ошибки или редиректы.
• Устаревшие значения lastmod. Даты изменения, не отражающие реальных правок.
• Путаница с sitemap index. Дочерние sitemap не отделены от URL страниц.

Практический сценарий работы

Разберите sitemap и сравните URL с выборкой ваших важных страниц. Исправьте логику генерации так, чтобы в файл попадали канонические индексируемые адреса, а остальные исключались. Отправьте sitemap в инструменты поисковых систем и следите за ошибками. Повторяйте проверку после крупных изменений сайта: при миграциях генерацию sitemap часто упускают из виду.

Ограничения

Проверка разбирает переданный ей файл sitemap. Она не проверяет, индексируем ли каждый URL, и не выясняет, упомянут ли sitemap в robots.txt или в панелях поисковых систем.