Что такое ошибки в отчёте Coverage / Pages в Google Search Console?
Проблемы индексации
Отчёт Coverage теперь называется Page indexing и находится в разделе Indexing > Pages. Он делит известные Google URL на проиндексированные и непроиндексированные и для каждой непроиндексированной страницы указывает причину. Одни причины — настоящие ошибки, из-за которых нужные вам страницы не попадают в Google: сбои сервера, сломанные редиректы, закрытый доступ. Другие — штатная работа Google. Чтобы разобраться с отчётом, нужно отличить одни от других, а затем исправлять причины в шаблонах, а не по одному URL.
Причины, которые действительно являются ошибками
| Причина в отчёте | Что произошло | Как исправить |
|---|---|---|
| Server error (5xx) | Сервер дал сбой, когда к нему обратился Googlebot | Проверьте состояние хоста в Crawl stats, затем протестируйте URL в реальном времени в URL Inspection |
| Redirect error | Слишком длинная цепочка, петля, слишком длинный URL или пустой URL в цепочке | Настройте для каждого старого URL один редирект прямо на конечную страницу |
| Blocked due to unauthorized request (401) | Для доступа к странице нужен вход | Уберите требование авторизации, если страница должна быть общедоступной |
| Blocked due to access forbidden (403) | Сервер отказывает Googlebot в доступе | Разрешите доступ Googlebot: он никогда не передаёт учётные данные |
| Blocked due to other 4xx issue | Другая клиентская ошибка | Проверьте URL, чтобы увидеть точный ответ сервера |
| URL blocked by robots.txt | Правило в robots.txt запрещает сканирование | Удалите правило, если страница должна индексироваться |
| Not found (404) | Такого URL больше нет | Настройте редирект, если контент переехал; если он удалён намеренно, оставьте как есть |
| Soft 404 | Страница отвечает кодом 200, но выглядит как страница с ошибкой или пустая | Верните настоящий код 404 или наполните страницу содержимым |
Ошибку Redirect error стоит изучить внимательнее, даже если конечная страница в браузере открывается: роботы Google проходят не более 10 редиректов подряд, и каждый переход — это отдельный запрос.
Причины, которые обычно не требуют вмешательства
URL marked 'noindex', Page with redirect, Alternate page with proper canonical tag и Duplicate without user-selected canonical обычно описывают страницы, которые и не должны индексироваться сами по себе. Убедитесь, что в каждом случае это задумано, и оставьте как есть. Две причины «currently not indexed» занимают промежуточное положение: это не ошибки, но если страницы для вас важны, их стоит проверить. О том, как их разбирать, читайте в материале про исключённые страницы.
Как работать с отчётом
- Начните с важных страниц. Отфильтруйте отчёт по sitemap, чтобы видеть ключевые URL, а не все случайные параметры, которые нашёл Google.
- Откройте причину и посмотрите примеры. В списке показано до 1,000 примеров URL, и он не всегда полный.
- Проверьте два-три URL в инструменте URL Inspection, чтобы убедиться, что именно получил Googlebot.
- Исправляйте причину там, где она возникает: чаще всего это шаблон, правило сервера или карта редиректов.
- Нажмите Validate fix. Сначала Google перепроверяет несколько страниц-образцов и останавливается со статусом Failed, если проблема осталась. В остальных случаях статус проходит через Started и Looking good до Passed; обычно это занимает около двух недель.
Не стремитесь к тому, чтобы проиндексированы были все URL. По рекомендациям самого Google, статус «не проиндексировано» не обязательно плох, а сайтам менее чем с 500 страницами этот отчёт, скорее всего, вообще не нужен. Страница, индексацию которой Google настоятельно советует проверить, — это ваша главная.
Отдельные причины подробнее разобраны в материалах: ошибки 404, soft 404, page with redirect и Crawled – currently not indexed.
Как помогает AutoPSEO
Инструмент проверки в Search Console работает с одним URL за раз. URL Inspection в AutoPSEO принимает sitemap, вставленный список или файл — до 500 URL за один запуск, в пределах квоты Google в 2,000 проверок на ресурс в сутки. Для каждого URL он возвращает статус, состояние покрытия, дату последнего сканирования и признак того, совпадает ли canonical, выбранный Google, с вашим. Результаты доступны для поиска и экспорта в CSV. Index Tracker повторяет эти проверки каждый день для нужных вам страниц и показывает все страницы, которые выпали из индекса или попали в него, с указанием дня, когда это произошло.
Источники: справка Google по отчёту Page indexing, HTTP-коды ответа и роботы Google и ограничения URL Inspection API.
Ещё в разделе Проблемы индексации
Переведите SEO-контент на автопилот
Подключите Search Console и свой сайт. AutoPSEO просканирует его и сразу спланирует первые темы. Банковская карта не нужна.