Полный список проверок перед запуском сайта в продакшен. robots.txt, sitemap, мета-теги, индексация, скорость, безопасность, адаптивность. Что нужно проверить до открытия сайта для поисковиков.
Введение
Запуск нового сайта — это как открытие магазина. Вы наняли дизайнера, который оформил витрину. Разработчик собрал стеллажи и настроил кассу. Контент-менеджер разложил товары по полкам. Осталось только открыть двери. Но перед этим кто-то должен проверить, что вывеска висит ровно, свет в подсобке не мигает, а ценники на месте. В мире сайтов этот кто-то — SEO-специалист, а процесс называется предполётной проверкой. Пропустить этот этап — всё равно что запустить магазин с заколоченными окнами и надеяться, что покупатели пробьются через чёрный ход. Поисковики просто не увидят сайт или, что хуже, увидят и составят плохое первое впечатление, которое потом придётся исправлять месяцами. В этой статье — контрольный список всего, что нужно проверить до того, как вы снимете заглушку и впустите на сайт поисковых роботов.
Техническая база: robots.txt и sitemap.xml
Первое, что сделает робот Яндекса, зайдя на сайт — запросит файл robots.txt. Если этого файла нет, робот пойдёт обходить всё подряд, включая служебные страницы, админку и тестовые разделы. Поэтому первая проверка: robots.txt существует и лежит строго в корне сайта по адресу site.ru/robots.txt. Откройте его в браузере и убедитесь, что он отдаёт код 200. Проверьте содержимое: нет ли директивы Disallow: /, которая запрещает индексацию всего сайта. Разработчики часто закрывают тестовый сайт от поисковиков и забывают снять запрет перед запуском. Проверьте, что в robots.txt не закрыты CSS и JS файлы — они нужны роботу для корректного рендеринга страниц. И убедитесь, что в файле указан путь к sitemap.xml. Следом проверьте саму карту сайта. Sitemap.xml должен отдавать код 200 и содержать только канонические URL с кодом 200. Никаких битых ссылок, никаких редиректов, никаких дублей. Если сайт большой, разбейте sitemap на несколько файлов и создайте индексный sitemap. Проверьте, что в sitemap не попали служебные страницы, страницы пагинации без уникального контента и другие нежелательные URL.
Индексация: разрешить нужное, запретить лишнее
До запуска вы должны чётко определить, какие разделы сайта должны индексироваться, а какие нет. Служебные страницы (админка, личный кабинет, корзина, страницы благодарности после заказа) должны быть закрыты от индексации. Способы закрытия: robots.txt для целых разделов, мета-тег noindex для отдельных страниц. Проверьте, что на страницах, которые должны индексироваться, нет noindex. Бывает, что разработчик скопировал шаблон и мета-тег разъехался на весь сайт. Проверьте канонические теги: каждая страница должна иметь canonical, указывающий на саму себя или на основную версию (если есть параметры URL). Убедитесь, что canonical не ведёт на тестовый домен — классическая ошибка при переносе с dev-окружения. Проверьте, что страницы не генерируют дубли. Например, одна и та же страница не должна быть доступна с www и без, с HTTP и HTTPS, со слешем на конце и без. До запуска настройте единый формат URL и редиректы с неканонических версий.
Мета-теги и заголовки: лицо сайта в выдаче
Каждая страница, которая должна индексироваться, обязана иметь уникальный title и заполненный description. Title — это то, что пользователь увидит в сниппете поисковой выдачи. Он должен содержать основной ключ страницы, быть читабельным и укладываться в лимит (примерно 70-80 символов, точнее проверяется в инструменте Вебмастера). Description — расширенное описание, которое часто используется в сниппете. Не влияет напрямую на ранжирование, но сильно влияет на кликабельность. Проверьте, что на сайте нет пустых title и description, нет дублей (одинаковых заголовков на разных страницах) и нет переспама ключевых слов. Отдельная проверка для H1: на каждой странице должен быть один и только один заголовок первого уровня. Он должен совпадать по смыслу с title, но не обязательно дословно. Проверьте, что H1 есть на всех страницах и не спрятан через CSS или JavaScript — робот должен видеть его в исходном коде.
Скорость загрузки: не заставляйте ждать
Новый сайт на свежей CMS часто радует скоростью — ещё нет раздутой базы данных и кучи плагинов. Но расслабляться нельзя. Прогоните ключевые страницы через тест скорости в Яндекс.Вебмастере. Проверьте метрики Core Web Vitals для мобильных устройств. Если сайт на WordPress, проверьте количество активных плагинов — оставьте только необходимые. Проверьте, что изображения оптимизированы: не загружаются полноразмерные фото весом по 5 мегабайт, а используются уменьшенные копии в современных форматах (WebP). Включите сжатие Gzip или Brotli на сервере, если оно ещё не настроено. Проверьте, что кеширование настроено корректно для статических ресурсов. Всё это проще сделать до запуска, чем разгребать последствия медленного сайта в первые дни после открытия, когда на сайт уже идёт трафик.
Мобильная версия и адаптивность
Больше половины поискового трафика в рунете приходит с мобильных устройств. Если сайт не адаптирован под смартфоны, вы теряете половину аудитории в момент запуска. Проверьте, как сайт выглядит на основных разрешениях: 360px, 390px, 414px по ширине. Нет ли горизонтальной прокрутки, не наползают ли элементы друг на друга, читается ли текст без зума. Проверьте, что кнопки и ссылки достаточно крупные для нажатия пальцем — минимум 48x48 пикселей, расстояние между ними не меньше 8 пикселей. Проверьте, что меню корректно сворачивается в гамбургер, а фильтры и сортировки работают касанием. Инструмент «Проверка мобильных страниц» в Яндекс.Вебмастере покажет, есть ли технические проблемы с мобильной версией. Если сайт на WordPress, убедитесь, что тема заявлена как адаптивная и реально таковой является.
Безопасность: HTTPS и защита от простых атак
Сайт должен работать по HTTPS с первой минуты запуска. Получить и настроить SSL-сертификат нужно до открытия, а не после. Проверьте, что сертификат корректно установлен, браузер показывает зелёный замочек, нет ошибок смешанного контента. Проверьте, что редирект с HTTP на HTTPS работает и отдаёт код 301. Убедитесь, что на сайте не отображаются технические детали в сообщениях об ошибках — никаких «MySQL error: connection refused» на публичных страницах. Настройте кастомные страницы ошибок 404 и 500. Проверьте, что админка сайта не индексируется и защищена хотя бы базово: нестандартный URL для входа, ограничение по IP, двухфакторная аутентификация, если CMS поддерживает. Обновите CMS и все плагины до последних версий — закрытые уязвимости в старых версиях это первая цель для автоматических атак.
Аналитика: счётчики и Вебмастер
До запуска установите и настройте коды Яндекс.Метрики и Яндекс.Вебмастера. Без Метрики вы не увидите, сколько людей заходит на сайт, откуда они приходят и что делают. Без Вебмастера не сможете управлять индексацией и отслеживать ошибки. Проверьте, что код Метрики установлен на всех страницах сайта, включая страницы ошибок. Настройте цели: отправка формы, клик по телефону, переход в мессенджер, оформление заказа — всё, что является конверсией для вашего бизнеса. В Вебмастере подтвердите права на сайт, добавьте sitemap, проверьте, что в разделе диагностики нет критических ошибок. Настройте уведомления о проблемах с сайтом на почту и в Telegram. Проверьте, что robots.txt в Вебмастере читается корректно и не выдаёт ошибок.
Финальный прогон: краулером по всему сайту
Когда все настройки выполнены, запустите полный краулинг сайта — автоматический обход всех страниц с фиксацией кодов ответа, заголовков и мета-тегов. Это поможет найти то, что вы пропустили при ручной проверке: битые ссылки, редиректы, пустые title, страницы без H1. Краулер покажет реальную структуру сайта — совпадает ли она с задуманной. Проверьте, что навигация работает: с любой страницы можно дойти до главной за 2-3 клика, все важные разделы доступны из меню. Проверьте хлебные крошки — они должны быть на всех страницах и корректно отражать иерархию. Финальный аккорд: откройте сайт на чужом устройстве или в режиме инкогнито и попробуйте выполнить целевое действие — найти товар, заполнить форму, позвонить. Посмотрите на сайт глазами пользователя, который видит его впервые.
После запуска: первые 48 часов
Сайт открыт. Но работа не закончена. В первые двое суток мониторьте Вебмастер и Метрику ежедневно. Что отслеживать: начало индексации (первые страницы должны появиться в поиске через 1-3 дня после открытия), отсутствие массовых ошибок обхода, реальный трафик. Проверьте, что редиректы, настроенные до запуска, работают в боевых условиях. Проверьте, что формы отправляют данные, а цели в Метрике срабатывают. Если сайт загружается медленно — не ждите, что «само рассосётся», ищите причину сразу. Первые недели после запуска — это период, когда Яндекс формирует первичное впечатление о сайте. Помогите поисковику увидеть лучшую версию вашего проекта.
Часто задаваемые вопросы
Можно ли запускать сайт без robots.txt? Технически да, роботы просто будут обходить сайт без ограничений. Но это рискованно: в индекс могут попасть служебные страницы, черновики и тестовый контент. Лучше потратить 15 минут на создание robots.txt до запуска, чем потом чистить индекс от мусора.
Что делать, если сайт уже запущен, а я не проверил ни один пункт из чек-листа? Не паниковать, а провести аудит сейчас. Даже если сайт работает месяц без оптимизации, лучше исправить ошибки на живом проекте, чем оставить всё как есть. Проверьте robots.txt, sitemap, мета-теги и скорость в первую очередь — это даст максимальный эффект. Затем постепенно закрывайте остальные пункты.
Нужен ли sitemap для сайта из 5 страниц? Технически Яндекс может проиндексировать маленький сайт и без sitemap. Но sitemap — это ещё и инструмент контроля. Вы всегда будете знать, какие страницы предложены к индексации, и видеть в Вебмастере, сколько из них реально в поиске. Для сайта любого размера sitemap — это хорошая практика.
Как проверить, что canonical настроен правильно? Откройте исходный код страницы (Ctrl+U) и найдите тег с атрибутом rel="canonical". Убедитесь, что в href указан правильный URL — без тестового домена, без лишних параметров, с правильным протоколом (HTTPS). Затем проверьте в Яндекс.Вебмастере через инструмент «Проверить URL» — какой canonical определил робот.
Обязательно ли подключать Яндекс.Метрику? Для SEO формально не обязательно. Но без Метрики вы слепы: не узнаете, сколько трафика приходит из поиска, по каким запросам, что пользователи делают на сайте. Аналитика — это фундамент, на котором строится SEO-стратегия. Лучше подключить её до запуска, чем гадать через полгода, почему трафик не растёт.
