Почему лендинг не появляется в Яндексе: разбираем причины

Лендинг может не индексироваться из-за блокировки в robots.txt, тега noindex, дублей без canonical, слишком нового домена или технических ошибок вроде 500-й на сервере. Свежая страница обычно попадает в индекс за несколько дней - две недели, если ничего не мешает роботу. Если прошел месяц, а страницы нет - ищите техническую причину, а не ждите дальше.

Сколько времени занимает индексация нового лендинга

Один из первых вопросов у владельца новой страницы - как проверить индексацию сайта и сколько до нее ждать. Робот Яндекса заходит на свежий домен не сразу: обычно первый визит случается через несколько дней после того, как на страницу кто-то сослался или вы сами отправили адрес через Вебмастер. Дальше индексация сайта идет волнами: сегодня в базу попала одна страница, через неделю еще одна.

Если домен раньше уже использовался и у него есть история ссылок, скорость выше - у робота готов маршрут захода. Для абсолютно нового домена цикл растягивается до месяца, и это нормальный темп, а не повод для тревоги в первую неделю. Хуже, если за месяц ничего не изменилось: тогда сайт не индексируется по конкретной причине, и ее нужно искать, а не ждать дальше.

Я сталкивался с обоими сценариями. Лендинг на новом домене без единой внешней ссылки индексировался три недели. Тот же лендинг, перенесенный клиентом на старый домен с историей, встал в выдачу на пятый день.

Как понять, что сайт не индексируется?

Самый простой способ - ввести в строку поиска Яндекса запрос вида site:вашдомен.ru. Если результатов ноль спустя две-три недели после публикации, страница действительно не в индексе. Если результаты есть, но нужной страницы среди них нет, проблема не в сайте целиком, а в конкретном урле: скорее всего, он закрыт отдельно.

Второй признак - полное отсутствие переходов из органического поиска в Метрике при том, что прошло больше месяца с публикации. Ноль показов и ноль кликов из поиска за такой срок почти всегда значит, что робот страницу не обошел или не добавил.

Как проверить индексацию сайта самостоятельно?

Кроме оператора site:, есть три быстрых проверки. Первая - открыть robots.txt по адресу вашдомен.ru/robots.txt и посмотреть, нет ли там правила Disallow: /, которое закрывает весь сайт целиком. Вторая - посмотреть исходный код страницы и найти в теге head строку meta name="robots" со значением noindex. Третья - зарегистрировать сайт в Яндекс Вебмастере и открыть отчет "Страницы в поиске": там видно, сколько страниц добавлено и по каким причинам остальные исключены.

Базовую настройку robots.txt, sitemap и метатегов лучше делать сразу при запуске, а не когда индексация уже забуксовала - об этом подробно в статье SEO-подготовка лендинга: метатеги, schema.org, sitemap.

Robots.txt закрывает лендинг от робота

Частая причина - строка Disallow: /, которая осталась в файле после разработки на тестовом поддомене. Разработчики закрывают черновую версию сайта от индексации намеренно, чтобы поисковик не увидел сайт раньше времени и не проиндексировал технический адрес вместо основного. При переносе на боевой домен эту строку забывают убрать, и закрытым остается уже готовый лендинг.

Проверка занимает минуту: файл robots.txt открывается в браузере как обычная страница, никаких инструментов не нужно.

Тег noindex остался после разработки

Похожая история с метатегом robots. Некоторые конструкторы сайтов и CMS ставят noindex автоматически, пока сайт числится черновиком, и снимают галку только вручную, отдельным действием после запуска. Если про этот шаг забыли, страница технически доступна, открывается по прямой ссылке, выглядит нормально - и при этом невидима для робота, потому что сама просит его не индексировать содержимое.

Индексация - это не разовое событие, а результат того, что робот делает каждый раз, заходя на сайт заново.

Дубли страниц без правильного canonical

Если лендинг открывается и по адресу вашдомен.ru, и по www.вашдомен.ru, и по адресу с utm-меткой в конце, для робота это разные урлы с одинаковым содержимым. Без тега canonical, который указывает на основную версию, поисковик выбирает, какую копию оставить в индексе, сам - и не всегда выбирает ту, которую ждет владелец сайта.

Микроразметка schema.org индексацию не ускоряет: по документации Google structured data используется для расширенных сниппетов в выдаче, а не как отдельный сигнал для обхода страниц роботом. Она делает содержимое понятнее, но не решает вопрос, попадет ли страница в индекс вообще - это отдельная задача, о которой можно почитать в справке структурированные данные Google.

Домен без истории и низкое доверие

У совсем нового домена нет ни одной внешней ссылки, ни истории посещений, ни репутации в глазах поисковика. Робот заходит на такие сайты реже и не спешит добавлять страницы в индекс: ему пока не на чем строить доверие. Это не блокировка и не ошибка - просто домен еще не заработал кредит доверия, который есть у сайтов постарше.

Ситуация ускоряется, если на лендинг ведет хотя бы одна внешняя ссылка - из соцсетей, с карточки в справочнике или из статьи на другом ресурсе. Даже одна такая ссылка дает роботу повод зайти раньше, чем он добрался бы своим обычным маршрутом.

Технические ошибки мешают роботу

Робот не индексирует страницу, если при заходе получает код ответа 404 или 500 вместо 200. Такое случается из-за опечатки в адресе при переносе сайта, временного сбоя хостинга во время визита робота или бесконечной цепочки редиректов, когда один урл переадресует на другой, а тот - на третий.

Сюда же относится медленная загрузка. Технически она не блокирует индексацию сама по себе, но заставляет робота тратить больше времени на одну страницу и обходить меньше страниц сайта за визит. Пороги, по которым оценивают скорость и стабильность верстки, описаны в документации Core Web Vitals web.dev. Если лендинг грузится больше пяти секунд на мобильном, стоит сначала разобраться со скоростью - как это сделать, подробно разобрано в статье Скорость загрузки лендинга: как ускорить сайт до 95+ по PageSpeed.

Частые вопросы

Сколько ждать индексацию, если сайт совсем новый?

От нескольких дней до месяца при условии, что нет технических блокировок. Если домен новый и на него не ведет ни одна внешняя ссылка, ближе к верхней границе этого срока.

Влияет ли платный или бесплатный хостинг на индексацию?

Сам по себе тип хостинга не влияет. Влияет стабильность: если сервер часто отдает ошибку 500 или уходит в недоступность в момент визита робота, индексация задерживается именно из-за этого, а не из-за цены тарифа.

Нужно ли добавлять сайт в Яндекс Вебмастер вручную?

Не обязательно, но это ускоряет первый заход робота и дает доступ к диагностике: отчет о страницах в поиске и список причин, по которым конкретный урл исключен.

Влияет ли отсутствие SSL-сертификата на индексацию?

Сайт без SSL робот все еще может проиндексировать, но в выдаче он проигрывает соседям с https, и браузер показывает пользователю предупреждение о незащищенном соединении. Смысла экономить на бесплатном сертификате нет.

Что делать, если прошло два месяца, а страницы все еще нет в поиске?

Пройти по всем причинам из этой статьи по порядку: robots.txt, noindex, canonical, код ответа сервера. Если все чисто, а страницы по-прежнему нет, стоит написать в поддержку Яндекса через форму в Вебмастере - это уже не типовая ситуация, а частный случай.

Что делать

Индексация нового лендинга - процесс, а не разовое включение. Проверьте четыре пункта по порядку: robots.txt, метатег noindex, canonical на дублях и код ответа сервера. В девяти случаях из десяти причина находится на этом шаге, и дальше можно просто ждать оставшиеся дни цикла.

Если с технической стороной все в порядке, а страница все равно не появляется больше месяца, дело не в индексации, а в том, стоит ли вообще рассчитывать на органический поиск для этой ниши. Иногда честнее сразу вложиться в трафик из рекламы, а не гнаться за позициями в выдаче - о том, когда органика вообще работает для одностраничника, я писал в статье Можно ли продвигать лендинг в поиске: честный ответ.