Dove si trova il report Statistiche di scansione in Google Search Console?

Statistiche di scansione non compare nel menu a sinistra di Search Console. Apri Impostazioni (l'icona a forma di ingranaggio), poi Statistiche di scansione, e apri il report da lì. Esiste solo per le proprietà a livello di root: una proprietà di dominio come example.com, oppure una proprietà con prefisso URL alla radice come https://example.com/. Una proprietà per una cartella come https://example.com/blog/ non lo include. Google afferma che i siti con meno di 1.000 pagine raramente ne hanno bisogno.

Come aprirlo

1. Passa a una proprietà di dominio o a una proprietà con prefisso URL alla radice. Se hai solo una proprietà a livello di cartella, aggiungi una proprietà di dominio per il sito.
2. Scegli Impostazioni in fondo al menu.
3. Trova Statistiche di scansione nella pagina delle impostazioni e apri il report.

Cosa mostra il report

Il grafico in alto riporta tre totali giornalieri:

• Richieste di scansione totali: tutte le richieste effettuate da Googlebot, riuscite o meno. Le richieste ripetute per lo stesso URL vengono contate ogni volta, così come ogni passaggio di una catena di reindirizzamenti.
• Dimensione totale del download: i byte recuperati. Una risorsa memorizzata nella cache e riutilizzata da più pagine viene recuperata una sola volta.
• Tempo di risposta medio: calcolato su tutte le risorse recuperate, con ogni risorsa di pagina contata separatamente.

Sotto, lo stato dell'host verifica tre aspetti negli ultimi 90 giorni: se è stato possibile recuperare robots.txt, se il DNS è stato risolto e se il server ha risposto. Ciascuno mostra un segno verde, un problema avvenuto più di una settimana fa oppure un problema recente, negli ultimi sette giorni.

Seguono quattro suddivisioni, ciascuna espressa come quota delle richieste:

Google classifica i 404 come "potenzialmente nella norma": una pagina rimossa deve restituire 404, e non è necessario correggerli tutti.

Come un errore di robots.txt blocca la scansione

robots.txt è l'elemento più importante del report. Un 200 (anche con file vuoto), 403, 404 o 410 conta come recupero riuscito. Un 429 o un 5xx conta come errore e, in tal caso:

1. Per le prime 12 ore, Google interrompe la scansione del sito e continua a richiedere il file.
2. Da 12 ore a 30 giorni, usa l'ultima copia valida.
3. Dopo 30 giorni, scansiona senza restrizioni se la home page è raggiungibile, altrimenti si ferma.

Una voce rossa nello stato dell'host per robots.txt è quindi un'emergenza: può bloccare l'intera scansione.

Andamenti che richiedono un intervento

• Le richieste calano mentre il tempo di risposta aumenta. Google riduce la frequenza di scansione quando un server rallenta o restituisce errori. Risolvi prima il problema del server.
• Googlebot sta sovraccaricando il server. Restituisci 503 o 429 solo per un breve periodo, non più di due o tre giorni, altrimenti la scansione potrebbe restare ridotta anche in seguito.
• Vuoi più scansione. Non puoi richiederla. Mantieni aggiornate le sitemap, rimuovi gli URL duplicati e indesiderati e assicurati che le pagine importanti non siano bloccate.
• Il report conta più richieste dei tuoi log. Può succedere quando robots.txt è rimasto non disponibile a lungo, perché Google conta le scansioni che avrebbe effettuato.

Due limiti da tenere presenti: le richieste sono elencate per l'URL effettivamente recuperato, non consolidate sugli URL canonici, e le risorse ospitate su altri domini non compaiono. Inoltre per questo report non esiste alcuna API, quindi i log del tuo server restano l'unica registrazione per singolo URL delle visite di Googlebot. Per capire se tutto questo limita l'indicizzazione, consulta il crawl budget.

Come ti aiuta AutoPSEO

L'API di Google non offre le statistiche di scansione, quindi AutoPSEO non può replicare questo report. Ecco invece cosa fa: l'Index Tracker registra l'ultima data di scansione che Google riporta per ogni URL monitorato e segnala le pagine indicizzate che non vengono scansionate da 120 giorni o più. Con una chiave di Bing Webmaster Tools collegata, AutoPSEO mostra anche le statistiche di scansione giornaliere di Bing e il suo elenco dei problemi di scansione.

Fonti: la guida al report Statistiche di scansione di Google e il riferimento all'API di Search Console.