Как проверить, какие страницы сайта проиндексированы Яндексом и Google. Способы: поисковые операторы, Вебмастер, Search Console, онлайн-инструменты. Пошаговая инструкция для вебмастера.
Вы опубликовали новую страницу, но не знаете, попала ли она в поиск. Или сайт существует давно, но трафика нет, и вы подозреваете, что половина страниц не проиндексирована. Это базовая задача вебмастера — понимать, какие страницы вашего сайта видят Яндекс и Google, а какие нет. Без этого невозможно диагностировать проблемы с трафиком. Если важная страница не в индексе, она не участвует в ранжировании и не получает переходы. Проверка индексации — первый шаг при любом SEO-аудите. Разберём все способы — от простых до профессиональных.
Что такое индексация и почему она важна
Индексация — это процесс, при котором поисковый робот скачивает страницу, анализирует её содержимое и добавляет в базу поисковика. Только проиндексированная страница может показываться в результатах поиска. Если страница не в индексе, её нет в выдаче — по ней нельзя получить трафик, её нельзя продвигать. Индексация не происходит мгновенно. Для нового сайта она может занять от нескольких дней до нескольких недель. Для существующего сайта новые страницы обычно индексируются быстрее, но тоже не сразу. Скорость индексации зависит от краулингового бюджета, качества контента, технических настроек и внешних сигналов. Проверить, что страница проиндексирована — это значит убедиться, что поисковик её видит и может показывать. Делать это нужно регулярно, особенно после добавления новых страниц или изменения существующих.
Способ 1: Поисковый оператор site:
Самый простой и быстрый способ проверить индексацию — оператор site: в поисковой строке. Введите site:ваш-домен.ru и поисковик покажет все страницы вашего сайта, которые находятся в индексе. Например, site:serpmax.ru покажет список проиндексированных страниц SerpMax. Это даёт общую картину: сколько страниц в индексе, какие разделы проиндексированы, есть ли в выдаче мусорные страницы. Для проверки конкретной страницы введите site:ваш-домен.ru/url-stranicy. Если страница найдена — она в индексе. Если результата нет — либо страница не проиндексирована, либо закрыта от индексации, либо ещё не попала в индекс. Ограничение оператора site: — он показывает не все страницы, а только выборку. Точное количество может отличаться от реального. Но для быстрой проверки этого достаточно. Важно: оператор site: работает и в Яндексе, и в Google. Проверяйте в обоих поисковиках, потому что индексация может отличаться.
Способ 2: Яндекс.Вебмастер
Яндекс.Вебмастер — это официальный инструмент для вебмастеров от Яндекса. Он показывает точную информацию об индексации: сколько страниц в поиске, какие исключены, какие заблокированы, какие ошибки обхода. Раздел «Индексирование» → «Страницы в поиске» показывает список проиндексированных страниц с датами индексации. Раздел «Индексирование» → «Исключённые страницы» показывает страницы, которые Яндекс исключил из индекса, с указанием причины: noindex, robots.txt, ошибка сервера, дубль, неканоническая страница. Это незаменимый инструмент для диагностики. Если страница не в индексе, Вебмастер покажет почему. Чтобы добавить сайт в Вебмастер, нужно подтвердить права на домен — через DNS-запись, мета-тег или файл подтверждения. После добавления Вебмастер начнёт собирать данные. Рекомендуется проверять Вебмастер хотя бы раз в неделю — там появляются уведомления о проблемах с индексацией, которые требуют вмешательства. Подробнее о Вебмастере читайте в статье Яндекс.Вебмастер для индексации.
Способ 3: Google Search Console
Search Console — аналог Вебмастера для Google. Работает похоже: показывает, сколько страниц в индексе, какие исключены, какие ошибки обхода. Раздел «Индексирование» → «Страницы» показывает статистику: сколько страниц в индексе, сколько исключено, сколько с ошибками. Для проверки конкретной страницы используйте инструмент «Проверка URL»: введите адрес, и Search Console покажет статус — проиндексирована, не проиндексирована, заблокирована robots.txt, ошибка. Также можно запросить индексацию новой страницы через этот инструмент. Search Console обязателен для работы с Google — без него вы слепы. Добавление сайта аналогично Вебмастеру: подтверждение через DNS или файл. Используйте оба инструмента параллельно: Яндекс.Вебмастер для Яндекса, Search Console для Google. Подробнее о работе с Search Console читайте в статье Как ускорить индексацию сайта в Google.
Способ 4: Онлайн-инструменты проверки индексации
Онлайн-инструменты позволяют проверить индексацию без входа в Вебмастер или Search Console. В SerpMax есть несколько полезных инструментов. Проверка noindex показывает, закрыта ли конкретная страница от индексации мета-тегом noindex или HTTP-заголовком X-Robots-Tag. Это первое, что нужно проверить, если страница не в индексе. Проверка robots.txt показывает, не запрещён ли обход страницы в robots.txt. Проверка canonical показывает, не указывает ли canonical на другой URL — если страница неканоническая, она не индексируется. Эти три проверки закрывают 90% причин, по которым страница может не попасть в индекс. Если все три показывают, что страница доступна, но её нет в индексе — возможно, проблема в том, что поисковик ещё не обошёл её. Тогда нужно ускорить индексацию: отправить страницу на переобход в Вебмастере, добавить внутренние ссылки, получить внешнюю ссылку. Полный чек-лист по ускорению индексации есть в статье Как ускорить индексацию сайта.
Способ 5: Проверка кеша страницы
Кеш поисковика — это сохранённая копия страницы, которую поисковик видел при последнем обходе. Проверка кеша показывает, какую версию страницы поисковик проиндексировал. В Google кеш можно посмотреть через оператор cache:url, но Google отключил эту функцию в 2024 году. В Яндексе кеш доступен через Вебмастер — инструмент «Посмотреть сохранённую копию». В SerpMax есть инструмент Проверка Google Cache, который показывает, есть ли страница в кеше Google. Если кеш есть — страница проиндексирована. Если кеша нет — возможно, ещё не проиндексирована. Кеш полезен не только для проверки факта индексации, но и для понимания, какую версию страницы видит поисковик. Если вы обновили страницу, а кеш показывает старую версию — значит, поисковик ещё не переобошёл её. Это нормально, но для важных изменений стоит запросить переобход через Вебмастер или Search Console.
Как проверить индексацию всех страниц сайта сразу
Для больших сайтов проверка каждой страницы вручную нереальна. Нужен массовый подход. Первый шаг: выгрузите список всех URL из sitemap.xml. Второй шаг: сравните его со списком проиндексированных страниц из Вебмастера или Search Console. Третий шаг: найдите URL, которые есть в sitemap, но нет в индексе — это проблемные страницы. Четвёртый шаг: для каждой проблемной страницы определите причину: noindex, robots.txt, canonical, ошибка сервера. Пятый шаг: исправьте причины и отправьте страницы на переобход. Для автоматизации этой работы используйте SEO аудит сайта онлайн — он сканирует сайт, проверяет все страницы на индексацию и выдаёт отчёт с проблемными URL. Если у вас сотни или тысячи страниц, без автоматизации не обойтись. Ручная проверка займёт дни, а автоматическая — минуты.
Частые причины, по которым страницы не индексируются
Причина первая: noindex. Страница закрыта мета-тегом noindex или HTTP-заголовком X-Robots-Tag. Проверьте через Проверка noindex. Причина вторая: robots.txt. Обход страницы запрещён директивой Disallow. Проверьте через Проверка robots.txt. Причина третья: canonical на другой URL. Страница неканоническая, и поисковик индексирует другую версию. Проверьте через Проверка canonical. Причина четвёртая: ошибка сервера. Страница отдаёт 404, 500 или 429. Проверьте коды ответа через Проверка HTTP заголовков. Причина пятая: страница не обнаружена. Никто не дал на неё ссылку, она не в sitemap. Решение: добавить в sitemap, поставить внутренние ссылки. Причина шестая: низкокачественный контент. Поисковик сознательно не индексирует страницы с тонким, дублированным или бесполезным контентом. Решение: улучшить контент, добавить глубину, уникальность. Причина седьмая: краулинговый бюджет исчерпан. Для больших сайтов робот не успевает обойти все страницы. Решение: оптимизировать краулинговый бюджет, закрыть мусорные страницы.
Как часто нужно проверять индексацию
Для нового сайта — ежедневно в первый месяц, пока не убедитесь, что индексация работает стабильно. Для существующего сайта — раз в неделю, чтобы ловить проблемы на ранней стадии. После крупных изменений (редизайн, переезд, смена структуры) — ежедневно в течение двух недель. Регулярная проверка индексации — это привычка, которая экономит месяцы. Лучше узнать о проблеме в день её появления, чем через месяц, когда трафик уже упал. Настройте себе напоминание: раз в неделю открывайте Вебмастер и Search Console, смотрите отчёты по индексации, проверяйте проблемные страницы. Это занимает 15 минут, но даёт полный контроль над ситуацией. Для автоматизации используйте инструменты SerpMax — они покажут, какие страницы закрыты от индексации, без ручного перебора.
Часто задаваемые вопросы
Как узнать, проиндексирована ли конкретная страница?
Введите site:ваш-домен.ru/url-stranicy в Яндексе или Google. Если страница найдена — она в индексе. Точный статус покажет Яндекс.Вебмастер или Google Search Console в инструменте «Проверка URL».
Почему страница не попадает в индекс?
Причины: закрыта noindex или robots.txt, canonical указывает на другой URL, ошибка сервера, страница не обнаружена (нет ссылок), низкокачественный контент. Проверьте все эти пункты через инструменты SerpMax и Вебмастер.
Сколько времени занимает индексация?
Для нового сайта — от 2 до 21 дня. Для новых страниц на существующем сайте — от нескольких часов до недели. Скорость зависит от краулингового бюджета, качества контента и технических настроек.
Сколько страниц должно быть в индексе?
В идеале — все страницы, которые должны приносить трафик. Служебные страницы (корзина, личный кабинет, страницы с параметрами) должны быть закрыты от индексации. Если в индексе меньше страниц, чем на сайте, — найдите и исправьте причины.
