Vad betyder "Discovered – currently not indexed"?

Google har hittat URL:en, via en länk eller en sitemap, men har ännu inte hämtat den, så URL Inspection visar inget datum för senaste crawlning. Googles förklaring är att crawlningen oftast har skjutits upp för att undvika att överbelasta din webbplats. Några få nya sidor i det här läget är normalt och löser sig av sig självt. Tusentals URL:er som blir kvar här i veckor tyder på en server som inte hänger med, eller på en webbplats som skapar fler URL:er än Google vill crawla.

Varför Google skjuter upp en crawlning

Google avgör hur mycket som ska crawlas utifrån två saker:

• Crawlkapacitet. Hur mycket crawlning din server klarar. Snabba, stabila svar höjer den; långsamma svar, 5xx-fel och 429-svar sänker den.
• Crawlefterfrågan. Hur mycket Google vill åt dina URL:er: hur populära de är, hur ofta de ändras och hur stor andel av din URL-inventering som verkar värd att hämta. Dubbletter och URL:er med lågt värde slösar bort efterfrågan.

Varje värdnamn behandlas som en separat webbplats, så www.example.com och shop.example.com crawlas oberoende av varandra.

Är det ett problem för din webbplats?

Så får du sidorna crawlade

1. Kontrollera servern först. Öppna Settings > Crawl stats och titta på värdstatus och genomsnittlig svarstid. Åtgärda serverfel och långsamma svar före allt annat. Se Crawl stats.
2. Ta bort de URL:er som inte borde finnas. Blockera crawlning av facett- och sorteringsvarianter i robots.txt, returnera 404 eller 410 för borttagna sidor, åtgärda soft 404 och korta ner omdirigeringskedjor. Lita inte på noindex här: Google måste fortfarande begära en sida för att se taggen.
3. Länka till de viktiga sidorna från sidor som redan är crawlade och indexerade. En URL som bara är känd från en sitemap väger lätt.
4. Håll sitemaps rena. Ta bara med kanoniska, indexerbara URL:er, med en korrekt <lastmod> när innehållet ändras.
5. Begär indexering sparsamt. Request indexing i URL Inspection hjälper för några få prioriterade sidor, inom en daglig gräns. Det löser inte en webbplatsövergripande eftersläpning.

Om antalet inte sjunker när servern mår bra och URL-inventeringen är ren bör du undersöka om sidorna är värda att crawla: efterfrågan beror också på hur användbara och populära Google bedömer dem vara. När en sida väl har crawlats kan den ändå hamna i Crawled – currently not indexed. Mer om helhetsbilden finns under crawlbudget.

Så hjälper AutoPSEO

Rapporten Sitemap Performance kopplar varje sitemaps URL-lista till dina siddata från Search Console. Den visar hur många listade URL:er som ger klick, hur många som inte ger några och hur många som aldrig syns i Search Console överhuvudtaget, och det är där oupptäckta och ocrawlade sidor gömmer sig. Index Tracker kontrollerar sedan de URL:er du bryr dig om varje dag via URL Inspection API och registrerar första dagen varje URL blir indexerad, så att du kan se hur lång tid nya sidor tar på din webbplats.

Källor: Googles hjälp för rapporten Page indexing, guide om crawlbudget och hjälp för verktyget URL Inspection.