Почему Google не индексирует страницу сайта: что проверить самому
Разница между отсутствием в выдаче, статусом в консоли и задержкой обработки, базовые проверки robots.txt, HTTPS и навигации, а также признаки, когда пора обращаться к хостеру.
Что именно означает «страница не индексируется»
Отсутствие страницы в поисковой выдаче, статус «не индексируется» в поисковой консоли и временная задержка обработки — это три разные ситуации. Выдача может не содержать страницу, потому что она ещё не обработана, потому что роботам запрещено её читать или потому что контент не прошёл оценку релевантности. Консоль показывает технический статус: сканирована ли страница, есть ли ошибки загрузки, разрешена ли индексация. Задержка обработки встречается у новых сайтов и у страниц, недавно изменённых: роботы посещают сайт с определённой частотой, и между обновлением контента и появлением в выдаче может пройти несколько дней или недель.
Проверьте доступность страницы по прямому адресу
Первый шаг — открыть страницу в браузере по полному адресу. Если страница не открывается, не загружается или выводит ошибку, поисковый робот столкнётся с тем же. Убедитесь, что адрес работает без перенаправлений, которые ломают цепочку: например, http перенаправляет на https, а https снова на http. Такие циклы делают страницу недоступной для индексации, даже если у вас она открывается через кэш браузера.
Осмотрите robots.txt
Файл robots.txt лежит в корне сайта и содержит правила для поисковых роботов. Если в нём есть строка вида Disallow: /articles/, все страницы раздела articles будут исключены из сканирования. Проверьте, не запрещён ли именно тот раздел, где находится ваша страница. Иногда запрет вводится случайно при настройке сайта или остаётся от периода разработки, когда контент ещё не был готов к публикации. Убедитесь, что файл не запрещает весь сайт целиком, например через Disallow: /.
Проверьте заголовки и уникальность контента
Заголовок страницы и его содержимое должны отвечать на конкретный вопрос или описывать конкретный предмет. Если на сайте несколько страниц с одинаковым текстом или с заголовками, которые не различаются, поисковая система может выбрать одну и пропустить остальные. Для небольшого сайта это типичная проблема: страницы услуг, написанные по одному шаблону с заменой одного слова, выглядят для алгоритмов как дубликаты. Убедитесь, что каждая страница содержит собственный текст, а не пересказ общего описания.
Роль HTTPS и технических условий
Протокол HTTPS добавляет слой шифрования поверх HTTP, защищая данные от перехвата во время передачи между клиентом и сервером. Для поисковых систем отсутствие действующего сертификата может означать, что страница не будет считана или будет считана с пониженным приоритетом. Проверьте, что сертификат установлен, не истёк и что переход с http на https происходит без ошибок. Если браузер показывает предупреждение о безопасности, робот, скорее всего, тоже не сможет корректно обработать страницу.
Запросите повторное сканирование
В поисковой консоли можно отправить адрес страницы на повторную проверку. Это ускорит обработку, если страница уже технически готова: доступна, не запрещена в robots.txt, имеет заголовок и уникальный контент. Запрос не гарантирует мгновенное появление в выдаче, но сокращает время ожидания, когда роботы ещё не успели посетить обновлённую страницу.
Оцените навигацию и структуру
Информационная архитектура начинается не со структуры каталога, а с понимания того, что именно человек пытается сделать на сайте. Если страница существует, но до неё невозможно добраться через меню или ссылки с других страниц, робот может просто не обнаружить её. Проверьте, что каждая значимая страница доступна хотя бы по одной ссылке из навигации или из текста другой страницы. Изолированные страницы, на которые нет ссылок, часто остаются неиндексированными.
Когда пора обращаться к хостеру или разработчику
Признаки, указывающие на проблему вне вашего контроля: страница открывается у вас, но не открывается по IP-адресу сервера; robots.txt выглядит корректно, но все страницы сайта не индексируются; ошибки перенаправления повторяются после изменений; сертификат установлен, но браузеры продолжают показывать предупреждения. В этих случаях причина может лежать в настройках сервера, файле конфигурации хостинга или в коде сайта. Самостоятельно такие вещи исправить сложно, и обращение к хостеру или разработчику экономит время.