Индексация сайта в Яндексе: почему сайт не индексируется и как ускорить

Сайт не индексируется в Яндексе, когда робот не может зайти на страницы, ему запретили это делать или он решил, что страницы не стоит показывать в поиске. Почти всегда причина находится за вечер в Яндекс Вебмастере. Ниже — десять причин в том порядке, в котором их стоит проверять, и как ускорить индексацию после исправления.

Сначала: добавлен ли сайт в Вебмастер

Без Яндекс Вебмастера вы гадаете вслепую. Добавьте сайт, подтвердите права файлом или метатегом и загрузите карту сайта. Через несколько дней в разделах «Индексирование» и «Диагностика» появится, сколько страниц робот обошёл, какие попали в поиск, а какие исключены и почему.

1. Сайт новый

Новый сайт Яндекс находит не сразу: от нескольких дней до нескольких недель. Ускорить можно картой сайта, переобходом страниц в Вебмастере и протоколом IndexNow — о нём ниже. Если прошёл месяц, а в поиске ноль страниц, ищите причину в следующих пунктах.

2. Запрет в robots.txt

Самая частая ошибка: на время разработки в robots.txt ставят Disallow: /, а после запуска забывают убрать. Проверьте файл по адресу ваш-сайт.ru/robots.txt и инструментом «Анализ robots.txt» в Вебмастере: он покажет, разрешён ли обход конкретной страницы.

3. Метатег noindex

Запрет может стоять и в коде страниц: <meta name="robots" content="noindex"> или в заголовке ответа сервера. В WordPress это галочка «Попросить поисковые системы не индексировать сайт» в настройках чтения — её часто включают на время разработки. Откройте код страницы и поищите noindex.

4. Сервер отвечает ошибкой

Робот индексирует страницы, которые отвечают кодом 200. Ошибки 5xx, страницы 404, длинные цепочки редиректов и слишком медленный ответ мешают индексации. Проверьте важные страницы инструментом «Проверка ответа сервера» в Вебмастере.

5. Защита от ботов не пускает робота

Антибот-защита, капча, блокировки по стране или CDN могут не пускать и поискового робота. Мы столкнулись с этим на своём сайте: он работал через Cloudflare, а такие сайты в России с 2025 года открываются с перебоями, и Яндекс видел только 5 страниц из 76. После переноса русской версии на российский хостинг робот Яндекса в первый же день зашёл на сайт почти полсотни раз. Если сайт за CDN или защитой, проверьте в Вебмастере, как робот видит страницы.

6. Дубли и неверный canonical

Если страница указывает в теге canonical на другую страницу, Яндекс исключит её как неканоническую. Это нормально для настоящих дублей, но бывает, что canonical по ошибке ведёт на главную со всех страниц. Ещё один источник дублей — версии сайта с www и без, с http и https: склейте их редиректом 301 на один адрес.

7. Малоценные и маловостребованные страницы

Яндекс может обойти страницу, но не включить её в поиск, если сочтёт её малоценной или маловостребованной: шаблонный текст, копия чужого, страница без спроса. В Вебмастере такие страницы видны в списке исключённых. Помогает только содержание: уникальный текст, который отвечает на реальный запрос.

8. На страницу нет ссылок

Робот находит страницы по ссылкам. Страница, на которую не ведёт ни одна ссылка с сайта, может годами оставаться незамеченной. Добавьте её в карту сайта и поставьте ссылки из меню, разделов и связанных статей.

9. Контент появляется только после скриптов

Если сайт собран так, что текст подгружается скриптами уже в браузере, робот может увидеть почти пустую страницу. Надёжнее отдавать готовый HTML сразу. Проверить, что видит робот, можно в Вебмастере.

10. Нарушения и санкции

Загляните в Вебмастер: «Диагностика» и «Безопасность и нарушения». Там видно, если сайт заражён, нарушает правила или под санкциями, например за накрутку поведенческих факторов.

Где что проверить

Как ускорить индексацию

• Карта сайта. Файл sitemap.xml со всеми страницами, загруженный в Вебмастер.
• Переобход страниц. В Вебмастере можно отправить важные страницы на переобход — у каждого сайта свой дневной лимит.
• IndexNow. Протокол, через который сайт сам сообщает Яндексу и Bing о новых и изменённых страницах. Мы отправляем через него каждую новую статью сразу после публикации.
• Ссылки с других площадок. Упоминания на VC, в Дзене и каталогах помогают роботу быстрее найти сайт.

Если сайт в индексе, но не приносит посетителей, дело уже не в индексации, а в позициях и в том, по каким запросам написаны страницы. Об этом — в статье метод «запрос = статья».