Почему мои страницы не индексируются?
Отправка и индексация
Search Console сообщает об этом по каждому URL отдельно. Откройте отчёт Индексирование страниц: все страницы, о которых знает Google, но которые он не проиндексировал, сгруппированы по причинам. Одни причины означают, что Google что-то блокирует (noindex, robots.txt, ошибка 404, ошибка сервера); другие — собственное решение Google, например посчитать страницу дубликатом или просканировать её и пока не индексировать. Устраните блокировки, которые вы не планировали, и улучшите страницы, которые Google пропустил.
Причины, при которых Google что-то блокирует
| Причина в отчёте | Что это обычно означает | Что делать |
|---|---|---|
| Ошибка сервера (5xx) | Ваш сервер дал сбой, когда к нему обратился Googlebot | Проверьте логи сервера и его мощности в моменты сканирования |
| Ошибка переадресации | Цепочка редиректов, цикл или неработающая конечная страница | Направляйте ссылки и редиректы сразу на конечный URL |
| URL заблокирован в файле robots.txt | Правило не позволяет Googlebot загрузить страницу | Удалите правило, если страница должна индексироваться |
| URL помечен тегом noindex | Мета-тег или заголовок запрещает Google индексировать страницу | Уберите его со страниц, которые должны быть в поиске |
| Soft 404 | Страница выглядит как страница с ошибкой или пустая | Верните настоящий код 404 или наполните страницу содержимым (soft 404) |
| Заблокировано из-за неавторизованного запроса (401), доступ запрещён (403) или другая ошибка 4xx | Авторизация, файрвол или фильтр ботов не пускает Googlebot | Пропустите Googlebot или смиритесь с тем, что страница останется закрытой |
| Не найдено (404) | Такого URL не существует | Нормально, если страница удалена; если нет — исправьте внутренние ссылки |
Причины, связанные с решением Google
- Просканировано, но пока не проиндексировано: Google загрузил страницу и решил пока не индексировать её. Обычно это признак того, что страница даёт слишком мало; см. просканировано, но не проиндексировано.
- Обнаружено, но пока не проиндексировано: Google знает этот URL, но ещё не сканировал его (обнаружено, но не проиндексировано).
- Альтернативная страница с правильным тегом canonical: всё работает как задумано.
- Дубликат без канонической страницы, выбранной пользователем: задайте canonical, чтобы версию выбирали вы, а не Google.
- Дубликат: Google выбрал канонической другую страницу, не ту, что указал пользователь: ваши сигналы противоречат друг другу (канонические URL).
- Страница с переадресацией: URL перенаправляет на другой, поэтому индексируется страница, на которую ведёт редирект (страницы с переадресацией).
Как работать с отчётом
- Установите фильтр по файлу Sitemap в значение Все отправленные страницы, чтобы сосредоточиться на URL, которые вы просили Google проиндексировать, а не на всех адресах, на которые он наткнулся.
- Откройте причину и проверьте несколько примеров URL с помощью инструмента проверки URL, воспользовавшись тестом в реальном времени, чтобы увидеть страницу в её текущем виде.
- Устраните причину в шаблонах и нажмите Проверить исправление. По словам Google, проверка обычно занимает до двух недель и может занять больше времени (справка по индексированию страниц).
- Не гонитесь за идеальным результатом. Сам Google отмечает, что не стоит ожидать индексирования каждого URL; цель — чтобы была проиндексирована каноническая версия каждой важной страницы.
Для совершенно нового сайта терпение — часть ответа. Google не гарантирует, что просканирует, проиндексирует или покажет любую страницу, а обнаружение требует времени: см. сколько времени занимает индексирование.
Как помогает AutoPSEO
Index Tracker ежедневно по расписанию проверяет до 1,800 выбранных URL и уведомляет вас, когда страница выпадает из индекса или возвращается в него. Прежде чем контент-движок напишет статью, он сверяет тему со страницами, которые уже есть на вашем сайте, чтобы не публиковать почти-дубликаты, которые Google просто объединил бы с уже существующей страницей.
Ещё в разделе Отправка и индексация
- Как отправить свой сайт в Google?
- Как отправить файл Sitemap в Google Search Console?
- Как запросить индексацию конкретного URL?
- Что означает статус \"Обнаружено — сейчас не проиндексировано\"?
- Что означает статус «Просканировано, но пока не проиндексировано»?
- Сколько времени Google индексирует мои страницы?
Переведите SEO-контент на автопилот
Подключите Search Console и свой сайт. AutoPSEO просканирует его и сразу спланирует первые темы. Банковская карта не нужна.