Mit jelent a „Discovered – currently not indexed” állapot?

A Google egy hivatkozáson vagy egy sitemapen keresztül megtalálta az URL-t, de még nem kérte le, ezért az URL Inspection nem mutat utolsó bejárási dátumot. A Google magyarázata szerint a bejárást általában azért halasztotta el, hogy ne terhelje túl az Ön webhelyét. Néhány új oldal ebben az állapotban normális, és magától megoldódik. Ha viszont több ezer URL marad itt hetekig, az vagy arra utal, hogy a szerver nem bírja a terhelést, vagy arra, hogy a webhely több URL-t állít elő, mint amennyit a Google be akar járni.

Miért halasztja el a Google a bejárást

A Google két tényező alapján dönti el, mennyit járjon be:

• Bejárási kapacitás (crawl capacity). Mennyi bejárást bír el a szervere. A gyors, stabil válaszok növelik, a lassú válaszok, az 5xx hibák és a 429 válaszok csökkentik.
• Bejárási igény (crawl demand). Mennyire kíváncsi a Google az URL-jeire: mennyire népszerűek, milyen gyakran változnak, és az URL-készlet mekkora része tűnik érdemesnek a lekérésre. A duplikált és alacsony értékű URL-ek pazarolják az igényt.

A Google minden hosztnevet külön webhelyként kezel, ezért a www.example.com és a shop.example.com bejárása egymástól függetlenül történik.

Probléma ez az Ön webhelyén?

Hogyan érheti el, hogy bejárják az oldalakat

1. Először a szervert ellenőrizze. Nyissa meg a Settings > Crawl stats oldalt, és nézze meg a hoszt állapotát és az átlagos válaszidőt. Mindenek előtt javítsa a szerverhibákat és a lassú válaszokat. Lásd: Crawl stats.
2. Szüntesse meg azokat az URL-eket, amelyeknek nem szabadna létezniük. Tiltsa le a robots.txt fájlban a szűrős és rendezett változatok bejárását, a eltávolított oldalakra adjon vissza 404 vagy 410 státuszt, javítsa a soft 404 hibákat, és rövidítse le az átirányítási láncokat. Ebben az esetben ne a noindex-re támaszkodjon: a Google-nek a címke megtekintéséhez is le kell kérnie az oldalt.
3. Hivatkozzon a fontos oldalakra olyan oldalakról, amelyeket már bejártak és indexeltek. Az az URL, amelyet csak egy sitemapből ismernek, kevés súllyal bír.
4. Tartsa tisztán a sitemapeket. Csak kanonikus, indexelhető URL-eket soroljon fel, és tartalomváltozáskor pontos <lastmod> értékkel.
5. Az indexelés kérését takarékosan használja. Az URL Inspection Request indexing funkciója néhány kiemelt oldalnál segít, napi korláton belül. A webhely egészét érintő lemaradást nem oldja meg.

Ha a szám az egészséges szerver és a megtisztított URL-készlet után sem csökken, vizsgálja meg, hogy az oldalak megérik-e a bejárást: az igény azon is múlik, mennyire hasznosnak és népszerűnek ítéli őket a Google. A bejárás után az oldal még mindig a Crawled – currently not indexed állapotba kerülhet. A tágabb összefüggésekről lásd: crawl budget.

Hogyan segít az AutoPSEO

A Sitemap Performance report összekapcsolja az egyes sitemapek URL-listáját a Search Console oldaladataival, és megmutatja, hány felsorolt URL hoz kattintást, hány nem hoz egyet sem, és hány nem jelenik meg egyáltalán a Search Console-ban – itt bújnak meg a fel nem fedezett és be nem járt oldalak. Az Index Tracker ezután naponta ellenőrzi a fontos URL-eket az URL Inspection API-n keresztül, és rögzíti, melyik napon indexelték őket először, így láthatja, mennyi ideig tartanak az új oldalak az Ön webhelyén.

Források: a Google Page indexing report help, crawl budget guide és URL Inspection tool help oldalai.