Как проверить,проиндексирован ли сайт:пошаговая инструкция

Индексация — это процесс, при котором поисковый робот обходит страницы сайта, разбирает их содержимое и добавляет в свою базу. Только после этого страница может показываться в результатах поиска.

Здесь важно не путать два разных состояния. Страница может быть доступна роботу для обхода, но при этом не участвовать в поиске: робот её увидел, оценил и решил не добавлять в выдачу. Например, посчитал дублем другой страницы или малоинформативной. Поэтому вопрос «робот заходил на страницу?» и вопрос «страница в индексе?» — это разные вопросы с разными ответами.

И ещё одно частое заблуждение: если страницы нет в индексе, она не будет показываться в поиске вообще — ни на первой странице, ни на десятой. Работа над позициями имеет смысл только после того, как страница в индекс попала.

Самый быстрый способ не требует ни доступов, ни регистрации. Введите в строку поиска Яндекса или Google запрос вида site:вашсайт.ru — без пробела после двоеточия и без https. Поисковик покажет страницы вашего сайта, которые есть в его базе, и приблизительное их количество.

Дальше сравните эту цифру с реальным количеством страниц на сайте. Если у вас 40 страниц услуг и статей, а нашлось 5 — это повод разбираться. Если нашлось примерно столько же, сколько есть, — базово всё в порядке.

Тем же оператором проверяется и отдельная страница: вместо домена подставьте её полный адрес. Если в выдаче она есть — страница в индексе. Если ничего не нашлось — её там нет.

Главное ограничение этого способа — приблизительность. Поисковик показывает оценочное число, оно может заметно плавать от проверки к проверке, и причины отсутствия страниц он не объясняет. Для быстрой прикидки годится, для разбора проблемы — нет.

Панель вебмастера показывает официальные данные поисковика о вашем сайте: сколько страниц в индексе, какие добавились, какие выпали и по какой причине. Если сайт ещё не добавлен в Вебмастер, начать нужно с этого — подтвердить права на домен, обычно это делается через файл, мета-тег или DNS-запись.

Основной отчёт находится в разделе «Индексирование» → «Страницы в поиске». Там виден список адресов, участвующих в поиске, динамика по датам и статусы страниц. Особое внимание стоит обратить на исключённые страницы: Вебмастер обычно указывает причину — дубль, малоценная страница, запрет в robots.txt, ошибка при загрузке.

Рядом есть ещё два полезных отчёта. «Статистика обхода» показывает, когда робот заходил на сайт и какие коды ответа получал: если там массово встречаются ошибки, проблема на стороне сервера. «Файлы Sitemap» — раздел, где видно, загрузилась ли карта сайта и сколько адресов из неё обработано.

Отдельно проверить конкретную страницу можно инструментом анализа индексации: он покажет, доступна ли она роботу и не закрыта ли директивами robots.txt.

Google ведёт свою базу отдельно, поэтому проверять его нужно в своей панели. Логика та же: добавить ресурс, подтвердить права, дождаться накопления данных — по новому сайту отчёты появляются не мгновенно.

Основной отчёт лежит в блоке «Индексирование» → «Страницы». Он делит все известные Google адреса на две группы: проиндексированные и непроиндексированные, — и для второй группы указывает причину. Формулировки бывают неочевидные, но смысл обычно сводится к нескольким вариантам: страница закрыта от индексации, признана дублем, отдаёт ошибку или Google просто до неё пока не дошёл.

Для проверки одной страницы есть инструмент «Проверка URL» — поле для адреса в верхней части интерфейса. Он показывает, есть ли страница в индексе, когда её последний раз сканировали, и позволяет отправить запрос на индексирование. Число таких запросов в сутки ограничено, поэтому тратить их стоит на действительно важные страницы, а не на весь сайт подряд.

Сразу важное: расхождение — это норма, а не обязательно ошибка. Поисковики намеренно не берут в индекс часть страниц, и часто они правы. Служебные разделы, страницы фильтров и сортировок, версии для печати, пагинация, технические дубли — всё это спокойно может оставаться за пределами индекса и никак не мешать продвижению.

Проблема начинается тогда, когда в индекс не попали важные страницы: услуги, товары, статьи, посадочные под конкретные запросы. Вот с ними и надо разбираться в первую очередь.

Причины почти всегда из одного короткого списка. Страница закрыта в robots.txt или мета-тегом noindex — частый остаток со стадии разработки. Страница отдаёт не код 200, а ошибку или редирект. На страницу не ведёт ни одной внутренней ссылки, и робот её просто не находит. Содержимое дублирует другую страницу, и поисковик выбрал в индекс только одну из них. Или сайт совсем молодой, и до части страниц робот пока не добрался — тогда нужно просто время.

Полезная деталь про robots.txt: он управляет обходом, а не индексированием. Если страница уже попала в индекс, закрытие её в robots.txt не удалит её оттуда автоматически — для этого нужен мета-тег noindex или инструмент удаления в панели вебмастера.

Полностью управлять скоростью индексации нельзя — решение всегда за поисковиком. Но повлиять на неё вполне реально, и начинать стоит с базовых вещей, а не с экзотических методов.

Первое — актуальный sitemap.xml. Карта сайта должна содержать живые страницы, обновляться при публикации новых материалов и быть указана в robots.txt и в панелях вебмастеров. Если sitemap не обновляется автоматически, новые страницы будут находиться дольше.

Второе — внутренняя перелинковка. На каждую важную страницу должна вести хотя бы одна ссылка с другой страницы сайта. Разделы, до которых нельзя дойти по ссылкам из меню или текста, робот находит в последнюю очередь, а иногда не находит вовсе.

Третье — ручная отправка на переобход. В Яндекс.Вебмастере это раздел «Переобход страниц», в Search Console — кнопка запроса индексирования внутри инструмента «Проверка URL». Лимиты небольшие, поэтому используйте их на приоритетных страницах. Яндекс, кроме того, поддерживает протокол IndexNow — он позволяет уведомлять поисковик о новых и изменённых страницах автоматически, сразу после публикации.

И четвёртое, менее очевидное: регулярность публикаций. Сайт, который обновляется предсказуемо, робот обходит чаще, чем тот, куда новый материал добавляют раз в полгода.

Если базовые причины исключены — запретов нет, страницы отдают код 200, ссылки на них есть, sitemap отправлен, — а важные разделы всё равно не индексируются больше месяца-полутора, дело обычно в чём-то системном: структуре сайта, качестве контента или технических проблемах, которые не видно с первого взгляда.

Именно это и разбирает SEO-аудит: проверяются коды ответа по всем страницам, дубли, скорость загрузки, корректность robots.txt и карты сайта, структура заголовков и перелинковка. На выходе — список того, что чинить, и в каком порядке.

Отдельно напомним про новые сайты. Если домену меньше нескольких месяцев, медленная индексация — часто просто возрастная особенность, а не поломка. Мы это знаем не из книжек: наш собственный домен зарегистрирован недавно, и мы проходим этот путь параллельно с клиентами. Подробнее о том, как устроена работа по поисковикам, — на странице SEO-продвижения, там же разделены Яндекс и Google.

Разберём вашу ситуацию бесплатно: посмотрим, что с индексацией, и скажем прямо, чинить ли что-то или просто ждать → оставить заявку