Страница была в индексе, приносила трафик, а потом исчезла. Или выпала часть страниц после обновления сайта. Это тревожный сигнал: причина может быть в технических ошибках, санкциях или изменениях алгоритмов. Разберём, почему страница исчезает из индекса и как вернуть её в поиск.
Как понять, что страница исчезла из индекса
Первое, что нужно сделать — убедиться, что страница действительно исчезла. Проверка по site: не всегда точна. Используйте:
— URL Inspection в Google Search Console;
— инструменты Яндекс.Вебмастера;
— проверку кэша Google;
— прямую проверку по site: запросу.
Если страница не находится ни одним способом, она, скорее всего, выпала из индекса. Если находится, но не ранжируется — это другая проблема.
Причина 1: страница закрыта от индексации
Самая частая причина. Страница могла быть закрыта случайно:
— добавлен noindex в meta robots;
— добавлен noindex в X-Robots-Tag;
— страница закрыта в robots.txt;
— canonical указывает на другую страницу.
Что проверить:
— meta robots;
— X-Robots-Tag;
— robots.txt;
— canonical;
— статус ответа сервера.
Если страница закрыта, поисковик исключит её из индекса.
Причина 2: страница отдаёт ошибку
Если страница отдаёт 404, 410 или 5xx, поисковик может исключить её из индекса.
Что проверить:
— статус ответа сервера;
— нет ли 404 или 410;
— нет ли 5xx;
— нет ли редиректа;
— нет ли soft 404.
Если страница удалена, 404 — нормально. Если страница существует, но отдаёт ошибку — нужно исправить.
Причина 3: изменения алгоритмов или санкции
Иногда страница исчезает из индекса после обновления алгоритмов поисковика или из-за санкций.
Признаки:
— страница исчезла резко;
— исчезли и другие страницы;
— в Вебмастере или Search Console есть предупреждения;
— трафик упал резко.
Что проверить:
— раздел «Санкции» в Вебмастере;
— раздел «Ручные санкции» в Search Console;
— изменения алгоритмов;
— качество контента.
Причина 4: дублирование или каннибализация
Если страница дублирует другую или конкурирует с ней за один запрос, поисковик может исключить одну из них из индекса.
Что проверить:
— есть ли дубли контента;
— есть ли каннибализация;
— какой canonical указан;
— какие страницы ранжируются по запросу.
Причина 5: технические изменения
Иногда страница исчезает после технических изменений:
— смены CMS;
— редизайна;
— смены хостинга;
— изменения URL;
— изменения структуры сайта.
Что проверить:
— изменился ли URL;
— есть ли редирект;
— не изменилась ли структура;
— не изменились ли внутренние ссылки.
Для проверки используйте проверка кэша Google — инструмент покажет, есть ли страница в кэше и какая версия сохранена.
Как найти причину
Пошаговая диагностика:
— проверьте, действительно ли страница исчезла;
— проверьте meta robots и X-Robots-Tag;
— проверьте robots.txt;
— проверьте canonical;
— проверьте статус ответа сервера;
— проверьте санкции;
— проверьте дубли и каннибализацию;
— проверьте технические изменения.
Как вернуть страницу в индекс
План действий:
— убрать noindex, если он есть;
— исправить статус ответа;
— убрать санкции, если они есть;
— устранить дубли и каннибализацию;
— исправить технические проблемы;
— запросить переобход;
— подождать и отслеживать.
Как проверить результат
Чек-лист:
— страница доступна;
— нет noindex;
— статус ответа 200;
— нет санкций;
— нет дублей;
— страница вернулась в индекс.
Если нужно проверить сразу несколько параметров — индексацию, noindex, редиректы — логично перейти к SEO-аудиту.
Частые ошибки
— случайный noindex;
— страница отдаёт 404 или 5xx;
— санкции;
— дубли и каннибализация;
— технические изменения без редиректов;
— отсутствие переобхода после исправлений.
FAQ
Почему страница исчезла из индекса?
Причин несколько: noindex, ошибка сервера, санкции, дубли, каннибализация или технические изменения. Начните с проверки noindex и статуса ответа.
Как проверить, в индексе ли страница?
Используйте URL Inspection в Search Console, инструменты Вебмастера или проверку кэша Google.
Может ли страница исчезнуть из-за обновления алгоритма?
Да. После обновления алгоритма страница может выпасть из индекса, если поисковик считает её некачественной.
Что делать, если страница закрыта noindex?
Убрать noindex, запросить переобход и подождать. Страница вернётся в индекс после обхода.
Влияет ли 404 на индексацию?
Да. Если страница отдаёт 404, она исключается из индекса. Если страница должна существовать, исправьте ошибку.
Как узнать, есть ли санкции?
В Яндекс.Вебмастере раздел «Санкции», в Google Search Console — «Ручные санкции». Там будут указаны причины.
Может ли каннибализация привести к исчезновению страницы?
Да. Если страница конкурирует с другой за один запрос, поисковик может исключить одну из них из индекса.
Что делать, если страница исчезла после редизайна?
Проверьте, не изменились ли URL, есть ли редиректы, не закрыта ли страница noindex. Исправьте и запросите переобход.
Сколько времени занимает возврат в индекс?
От нескольких дней до нескольких недель. Зависит от частоты обхода и авторитета сайта.
Можно ли гарантировать возврат в индекс?
Нет. Поисковик сам решает, что индексировать. Но можно создать условия, при которых возврат более вероятен.