Как проверить индексацию сайта в Google — пошаговая диагностика
Проверка индексации в Google Search Console — URL Inspection, sitemap, robots.txt, canonical, noindex и причины исключения страниц.
Индексация сайта в Google проверяется прежде всего в Google Search Console, а не только командой site:. Она показывает сведения о конкретном URL, доступности для робота и выбранной канонической версии.
Если страница не появляется в Google, сначала выясните, обнаружена ли она и может ли робот получить её содержание. Создавать новые копии статьи или бесконечно отправлять URL на переобход до диагностики не стоит.
Проверка отдельного URL
В Search Console откройте «Проверка URL» и вставьте полный адрес с протоколом. Посмотрите статус индексирования, доступность, последний обход и сведения о canonical. Если документ исключён, причина может относиться к роботам, ошибкам ответа, дубликатам или оценке качества страницы.
Команда site:example.ru/stranica может помочь ориентироваться в выдаче, но её результаты неполны и не являются точным отчётом о количестве индексируемых URL.
Как проверить robots.txt и noindex
Откройте https://домен/robots.txt, убедитесь, что важные разделы не заблокированы. Проверьте метатег robots и HTTP-заголовок X-Robots-Tag: директива noindex не должна попадать на важную страницу случайно. При этом запрет обхода через robots.txt может мешать роботу увидеть сам noindex.
Проверка sitemap.xml
В карте сайта должны находиться актуальные канонические URL, которые действительно требуется индексировать. Удалите из неё адреса с ошибками сервера, редиректами и очевидными дублями. Загрузите карту в Search Console и анализируйте не только статус чтения файла, но и результаты индексирования отдельных страниц.
Sitemap сообщает о доступных адресах, но не обещает, что Google включит каждый URL в индекс.
Если Google выбрал другой canonical
Сравните содержание двух адресов, внутренние ссылки, редиректы и тег canonical. Для параметров сортировки, страниц с WWW и без WWW, HTTP и HTTPS полезна согласованная политика адресов. Не ставьте одинаковый canonical на весь каталог автоматически — иногда пагинация или фильтры имеют самостоятельное содержимое.
Техническая проверка при массовом выпадении
При резкой потере страниц проверьте коды HTTP, доступность хостинга, TLS, серверные изменения, историю robots.txt и настроек CMS. Затем сопоставьте дату падения с журналами ошибок и изменениями шаблонов. Не делайте вывод о «санкциях» только на основании одного графика.
Что делать после устранения ошибки
Исправьте первопричину, убедитесь, что страница получает корректный ответ и содержит полезную информацию, затем запросите переобход для важных URL или дождитесь обычного обнаружения. Повторная отправка одного адреса ежедневно не ускоряет гарантированно индексацию.
Когда индекс есть, а трафика нет
Изучите запросы в отчёте эффективности — показы, клики, CTR и позиции по целевым страницам. Возможно, страница индексируется, но не соответствует запросу или конкуренты лучше решают задачу посетителя. Тогда работа с robots.txt не даст прироста.
Что означает «Обнаружена, но пока не проиндексирована»
URL известен Google, однако документа пока нет в индексе. Возможны очередь обхода, приоритет страницы или другие причины. Проверьте, есть ли на неё внутренние ссылки, действительно ли она полезна и отличается от других материалов. Не запускайте массовую генерацию новых дублей для «ускорения» ситуации.
Что означает «Просканирована, но пока не проиндексирована»
Робот получил страницу, но она не попала в индекс. Начните с содержания и канонических сигналов. Сравните её с уже индексируемыми материалами вашего сайта — достаточно ли самостоятельна задача, нет ли устаревшего шаблонного текста, открываются ли основные элементы без ошибок.
Как работать с ошибками сервера
Если важный URL время от времени возвращает 500 или 503, проверьте журналы сервера и время ответа. Не заменяйте все ошибки редиректом на главную — это маскирует причину и ухудшает пользовательский маршрут. После исправления проверьте стабильный HTTP 200 и отсутствие повторного сбоя при обходе.
Минимальный чек-лист
Проверьте HTTP 200, доступный HTML, отсутствие случайного noindex, корректный canonical, внутренние ссылки и актуальную карту сайта. Если нужен системный разбор, используйте SEO-аудит и руководство по индексации.