내 페이지가 색인되지 않는 이유는 무엇인가요?
제출 및 색인 생성
Search Console은 URL별로 그 이유를 알려 줍니다. 페이지 색인 생성 보고서를 열면 Google이 알고 있지만 색인하지 않은 모든 페이지가 사유별로 묶여 있습니다. 어떤 사유는 Google의 접근을 무언가가 막고 있다는 뜻이고(noindex, robots.txt, 404, 서버 오류), 어떤 사유는 Google 자체의 판단입니다. 예를 들어 페이지를 중복으로 간주하거나, 크롤링은 했지만 아직 색인하지 않기로 결정한 경우입니다. 의도하지 않은 차단은 해결하고, Google이 건너뛴 페이지는 품질을 개선하세요.
Google의 접근을 막고 있다는 의미의 사유
| 보고서의 사유 | 일반적인 의미 | 해결 방법 |
|---|---|---|
| 서버 오류(5xx) | Googlebot이 요청했을 때 서버에서 오류가 발생함 | 크롤링 시점의 서버 로그와 서버 용량을 확인하세요 |
| 리디렉션 오류 | 리디렉션 체인, 루프 또는 깨진 대상이 있음 | 링크와 리디렉션이 최종 URL을 바로 가리키도록 수정하세요 |
| robots.txt에 의해 차단된 URL | 규칙 때문에 Googlebot이 페이지를 가져오지 못함 | 페이지를 색인해야 한다면 해당 규칙을 제거하세요 |
| 'noindex'로 표시된 URL | 메타 태그나 헤더가 Google에 색인하지 말라고 지시함 | 검색에 노출하려는 페이지에서는 제거하세요 |
| 소프트 404 | 페이지가 오류 페이지이거나 빈 페이지처럼 보임 | 실제 404를 반환하거나 페이지에 실제 콘텐츠를 채우세요(소프트 404) |
| 승인되지 않은 요청(401)으로 차단됨, 액세스 금지됨(403) 또는 기타 4xx 문제 | 로그인, 방화벽 또는 봇 필터가 Googlebot을 거부함 | Googlebot이 접근할 수 있게 하거나, 비공개 페이지로 유지하세요 |
| 찾을 수 없음(404) | URL이 존재하지 않음 | 삭제된 페이지라면 문제없습니다. 그렇지 않다면 내부 링크를 수정하세요 |
Google의 판단에 따른 사유
- 크롤링됨 - 현재 색인 생성되지 않음: Google이 페이지를 가져왔지만 현재로서는 색인하지 않기로 했습니다. 대개 페이지가 제공하는 가치가 부족하다는 신호입니다. 크롤링됨, 색인 생성되지 않음을 참고하세요.
- 발견됨 - 현재 색인 생성되지 않음: Google이 URL은 알고 있지만 아직 크롤링하지 않았습니다(발견됨, 색인 생성되지 않음).
- 적절한 표준 태그가 있는 대체 페이지: 의도한 대로 작동하는 상태입니다.
- 사용자가 선택한 표준 페이지가 없는 중복 페이지: 표준 URL을 직접 지정해 Google이 아닌 사용자가 대표 버전을 정하세요.
- 중복 페이지, Google이 사용자와 다른 표준 페이지를 선택함: 사용자가 보낸 신호들이 서로 일치하지 않습니다(표준 URL).
- 리디렉션이 있는 페이지: URL이 리디렉션되므로 대신 그 대상이 색인됩니다(리디렉션이 있는 페이지).
보고서 활용 방법
- 사이트맵 필터를 제출된 모든 페이지로 설정하면 Google이 우연히 발견한 모든 URL이 아니라, 색인을 요청한 URL에 집중할 수 있습니다.
- 사유를 하나 열고 URL 검사 도구로 예시 URL 몇 개를 검사하세요. 라이브 테스트를 사용하면 페이지의 현재 모습을 확인할 수 있습니다.
- 템플릿에서 원인을 수정한 다음 수정사항 검증을 클릭하세요. Google에 따르면 검증은 보통 최대 2주 정도 걸리며 더 길어질 수도 있습니다(페이지 색인 생성 도움말).
- 완벽한 점수를 쫓지 마세요. Google 스스로도 모든 URL이 색인될 것을 기대하지 말라고 안내합니다. 목표는 중요한 모든 페이지의 표준 버전이 색인되는 것입니다.
새로 만든 사이트라면 기다림도 해답의 일부입니다. Google은 어떤 페이지든 크롤링, 색인 생성 또는 게재를 보장하지 않으며, 발견에도 시간이 걸립니다. 색인 생성에 걸리는 시간을 참고하세요.
AutoPSEO가 도와드리는 방법
Index Tracker는 선택한 최대 1,800개의 URL을 매일 일정에 따라 검사하고, URL이 색인에서 빠지거나 다시 포함되면 알려 줍니다. 콘텐츠 엔진은 글을 작성하기 전에 해당 주제를 사이트에 이미 있는 페이지와 대조하므로, Google이 기존 페이지로 통합해 버릴 뿐인 유사 중복 콘텐츠를 게시하지 않습니다.