Top.Mail.Ru

Индексация сайта: как проверить, почему страницы не попадают в поиск и как ускорить

Коротко. Чтобы страница могла попасть в поиск, она должна быть доступна поисковому роботу, содержать полезный самостоятельный материал и не иметь запрета noindex. Добавьте её в карту сайта и поставьте на неё внутреннюю ссылку с подходящей страницы. Затем проверьте URL в Яндекс Вебмастере и Google Search Console. Отправка на обход сообщает поисковику об изменении, но не гарантирует включения в индекс.

Вы запустили сайт или добавили новую страницу услуги и ждёте звонков из поиска. А их нет — и не потому, что конкуренты сильнее. Часто Яндекс и Google просто ещё не знают, что страница существует: её нет в индексе, значит, её не покажут ни по одному запросу. Хорошая новость: это проверяется за пять минут и в большинстве случаев исправляется без программиста. Разберём, как проверить индексацию сайта, почему страницы не попадают в поиск и как ускорить индексацию в Яндексе и Google.

Не хотите разбираться сами? Пришлите адрес сайта — в первую неделю бесплатно проверим, какие страницы видит Яндекс, какие нет и почему. SEO-продвижение с оплатой за результат →

1. Что такое индексация сайта простыми словами

Индексация сайта — это добавление страниц в базу поисковика, индекс: показать в выдаче Яндекс и Google могут только то, что в нём есть. Поисковик работает в три шага. Сначала робот находит адрес страницы — по ссылке, из карты сайта или из вашего запроса в Вебмастере. Потом скачивает страницу и читает её. И только после этого решает, добавить ли её в индекс.

Важно: «робот зашёл» и «страница в поиске» — не одно и то же. Яндекс может скачать страницу и не включить её в поиск, например если сочтёт её дублем или малополезной. Поэтому смотреть нужно не на то, был ли робот, а на то, попала ли страница в индекс.

2. Наш пример: 208 страниц загружено, в поиске — 4

Мы ведём дневник роста собственного сайта clarcgroup.ru с нуля — с реальными цифрами. На старте, 29 сентября 2026 года, Яндекс Вебмастер показывал: страниц загружено 208, в поиске 4. В Google Search Console — 2 страницы в индексе и 12 не проиндексированы. При этом сайт работал, страницы открывались, но для поиска он почти не существовал.

Причины нашлись типичные: в карте сайта лежал мусор (служебная запись «hello-world», страницы автора и пустой рубрики), у главной не был указан канонический адрес, и Яндекс исключал её как «малоценную». После уборки карты сайта, настройки канонических адресов и отправки страниц на обход картина поменялась: по отчёту Google от 12 октября в индексе 19 страниц, не в индексе — 6. Как это происходит неделя за неделей, видно в дневнике «Сайт с нуля».

3. Как проверить индексацию сайта

Быстро: оператор site: в поиске

Наберите в Яндексе или Google site:вашсайт.ru — это дополнительный ориентир, какие страницы поисковик показывает в выдаче. Результаты оператора не являются полным списком индекса: отсутствие конкретного URL ещё не доказывает, что страница не проиндексирована. Статус важной страницы проверяйте по её полному адресу в Яндекс Вебмастере и Google Search Console.

Точно: Яндекс Вебмастер

  • «Индексирование → Страницы в поиске» — какие страницы в поиске, какие исключены и по какой причине.
  • «Проверить статус URL» — состояние конкретного адреса: известен ли он роботу, когда его скачивали, в поиске ли он.
  • «Переобход страниц» — попросить робота зайти на новую или изменённую страницу.

Точно: Google Search Console

  • Отчёт «Страницы» — сколько страниц в индексе и почему остальные не попали.
  • «Проверка URL» — статус одного адреса и кнопка «Запросить индексирование».

Если сайт ещё не добавлен в эти сервисы — начните с этого. Без Вебмастера и Search Console вы не узнаете, почему страница не в поиске, а будете только гадать.

4. Почему страницы не попадают в индекс

Чаще всего страница не попадает в индекс по одной из шести причин: она закрыта от индексации, это дубль, Яндекс счёл её малоценной, робот о ней не знает, на ней технические ошибки или сайт совсем новый. В Вебмастере и Search Console у каждой исключённой страницы указана причина. Самые частые:

  • Есть запрет индексации или обхода. Проверьте метатег noindex, HTTP-заголовок X-Robots-Tag, robots.txt и настройку видимости WordPress. Noindex запрещает включение страницы в индекс, а Disallow ограничивает скачивание роботом. Это разные ограничения: запрет обхода может помешать поисковику прочитать noindex.
  • Дубли и неканонические страницы. Одна и та же страница доступна по нескольким адресам: со слешем и без, с параметрами, через www. Поисковик выбирает одну, остальные исключает — и не всегда ту, которую вы хотели.
  • Поисковик не включил страницу в индекс после обхода. Яндекс может указать «Малоценная или маловостребованная страница». Проверьте, даёт ли материал самостоятельный ответ и чем отличается от других страниц. Статус Google «Просканирована, но пока не проиндексирована» сам по себе не раскрывает причину: по нему нельзя уверенно заключить, что текст малоценный.
  • Страница ещё не обойдена. Проверьте, есть ли она в карте сайта и ведут ли на неё внутренние ссылки. Статус Google «Обнаружена, не проиндексирована» означает, что адрес уже известен поисковику, но страница пока не просканирована. Он не доказывает, что робот не знает URL или что на него совсем нет ссылок.
  • Технические ошибки. Страница отдаёт ошибку, долго открывается, перенаправляет по кругу.
  • Сайт совсем новый. Новым доменам поисковики доверяют осторожнее, и индексация идёт медленнее.

Обратите внимание: почти все причины — на стороне сайта, а не поисковика. Поэтому их и можно исправить.

5. Как проиндексировать сайт и ускорить индексацию

Чтобы проиндексировать сайт, откройте его для поискового робота, добавьте карту сайта в Яндекс Вебмастер и Google Search Console и отправьте важные страницы на обход вручную. Всё это бесплатно. Дальше робот находит новые страницы сам — по карте сайта и внутренним ссылкам. Ниже — по шагам.

  1. Проверьте, что сайт открыт для робота. robots.txt, метатег robots, настройка видимости в WordPress. Это первое, что мы смотрим при любом SEO-аудите.
  2. Наведите порядок в карте сайта. В sitemap.xml должны быть только живые страницы, которые вы хотите видеть в поиске: без служебных, пустых и закрытых. Добавьте карту в Вебмастер и Search Console.
  3. Укажите канонический адрес. У каждой страницы — один основной адрес, остальные варианты ведут на него перенаправлением или помечены каноническим.
  4. Поставьте внутренние ссылки. Новую страницу услуги свяжите с главной, меню и статьями блога. Робот ходит по ссылкам: страница, на которую никто не ссылается, находится последней.
  5. Отправьте страницу на обход вручную. В Яндекс Вебмастере — «Переобход страниц», в Search Console — «Проверка URL → Запросить индексирование». Число заявок в день ограничено, поэтому отправляйте важное: новые страницы услуг и обновлённые тексты.
  6. Подключите IndexNow. Это протокол, через который сайт сам сообщает поисковикам о новых и изменённых страницах; его поддерживает Яндекс. Для WordPress есть готовые плагины, на других движках подключают через разработчика.
  7. Сделайте страницу полезной. Ускорители не помогут, если страница — три строки и форма заявки. Ответьте на вопросы клиента: что входит, сколько стоит, сроки, примеры работ, вопросы и ответы.

Сроки называть точно никто не может: обычно от нескольких дней до нескольких недель, новым сайтам — дольше. Если через месяц страницы всё ещё нет в поиске, ждать дальше бессмысленно — нужно искать причину.

Повторная отправка одного и того же URL каждый день не ускоряет обработку запроса Google. После существенной правки отправьте страницу на проверку и следите за статусом. Если поисковик выбрал другой канонический адрес или исключил материал, сначала разберите причину: дополнительный запрос на обход не исправляет содержание или настройки страницы.

6. Страница в индексе — это ещё не клиенты

Индексация — только допуск к соревнованию. Попасть в индекс и стоять на 80-м месте почти то же самое, что не попасть: до второй страницы выдачи доходят единицы. Наш собственный пример честный: у clarcgroup.ru в Google за неделю 12–18 октября было больше тысячи показов, но средняя позиция — около 79, а кликов пока ноль. Следующий шаг после индексации — подтянуть страницы к топ-10: правильные запросы, тексты, коммерческие блоки, удобство с телефона. Об этом подробно — в статье «Как продвинуть сайт».

7. Чек-лист: 10 минут на проверку индексации

  • Сайт добавлен в Яндекс Вебмастер и Google Search Console.
  • По запросу site:вашсайт.ru видны главная и страницы услуг.
  • В настройках WordPress не стоит галочка «не индексировать сайт».
  • В robots.txt нет запрета на весь сайт (строки «Disallow: /»).
  • Карта сайта открывается и добавлена в оба сервиса.
  • У главной и страниц услуг один канонический адрес.
  • На каждую страницу услуги есть ссылки из меню или с главной.
  • В отчётах об исключённых страницах нет ваших важных страниц.

Если хотя бы один пункт не выполняется — начните с него. Если всё в порядке, а заявок из поиска нет — проблема уже не в индексации, а в позициях. Это ровно то, что мы разбираем в бесплатную неделю SEO-продвижения: смотрим, как Яндекс видит сайт и почему конкуренты выше, собираем запросы и показываем план. Для теста нужен только адрес сайта.

Частые вопросы

Как проиндексировать сайт в Яндексе и Google бесплатно?

Бесплатно, через сервисы самих поисковиков: в Яндекс Вебмастере добавьте сайт, загрузите карту сайта и отправьте страницы в «Переобход страниц», в Google Search Console — то же через «Файлы Sitemap» и «Проверка URL → Запросить индексирование». Платных способов «попасть в индекс быстрее» у Яндекса и Google нет.

Сколько времени занимает индексация нового сайта?

Обычно от нескольких дней до нескольких недель. Новый домен индексируется медленнее; ускоряют процесс карта сайта, внутренние ссылки, ручная отправка в Вебмастер и Search Console и IndexNow.

Почему страница есть в Google, но нет в Яндексе?

У поисковиков разные правила. Яндекс строже относится к страницам, которые считает малоценными или дублями. Посмотрите причину исключения в Вебмастере: «Индексирование → Страницы в поиске → Исключённые».

Можно ли заплатить, чтобы сайт быстрее попал в индекс?

Нет. Платного ускорения индексации у Яндекса и Google нет. Реклама в Директе показывает сайт сразу, но на попадание в обычный поиск не влияет.

Как закрыть страницу от индексации?

Для запрета индексации используйте метатег robots со значением noindex или HTTP-заголовок X-Robots-Tag: noindex. Поисковому роботу нужно разрешить доступ к странице, чтобы он прочитал этот запрет. Disallow в robots.txt ограничивает обход, но сам по себе не гарантирует удаление адреса из поиска. Закрытие служебных страниц не заменяет пароль и защиту персональных данных.

Страницы в индексе, а трафика нет. Что делать?

Значит, страницы стоят далеко от топ-10 или продвигаются по запросам, которые не ищут. Нужны семантика, доработка страниц услуг и коммерческие факторы. Первую неделю такой работы мы делаем бесплатно — подробнее о SEO-продвижении.