Sperimentazione: verifica se una modifica SEO ha spostato il tuo traffico

La sperimentazione risponde alla domanda che ogni modifica SEO solleva: ha funzionato, o si è mosso l'intero sito? Definisci un gruppo di trattamento (le pagine che hai modificato), un gruppo di controllo (pagine simili lasciate invariate) e una data di rilascio. AutoPSEO confronta ciascun gruppo dopo il rilascio con i propri 28 giorni precedenti e verifica se lo scarto tra i due supera il rumore di fondo quotidiano. Poiché il controllo condivide stagionalità, aggiornamenti di Google e oscillazioni della domanda, questo approccio isola la tua modifica molto meglio di un semplice confronto prima e dopo.

Creare un esperimento

Premi Nuovo e compila:

• Nome e Ipotesi: cosa hai modificato e cosa ti aspetti, ad esempio "Lo schema FAQ sulle guide prodotto aumenta il CTR del 10%".
• Data di inizio: il giorno in cui la modifica è andata online. La data di fine è facoltativa; se non la indichi, l'esperimento prosegue fino all'ultimo giorno con dati disponibili.
• Metrica: Clic, Impressioni, CTR o Posizione. Tutte e quattro vengono riportate; questa determina il vincitore.
• Gruppo di trattamento e Gruppo di controllo: ciascuno è un Elenco di URL (fino a 500 URL assoluti) oppure un Pattern URL (regex), ad esempio ^https://www.example.com/guides/.

Due scorciatoie semplificano la definizione dei gruppi. Carica un CSV con i gruppi di URL legge un file con le colonne url e group; il primo gruppo del file diventa il controllo e il secondo il trattamento. Suggerisci gruppi automaticamente carica le tue pagine principali degli ultimi 28 giorni e propone i gruppi in base alla prima cartella (ogni cartella con almeno tre pagine), pronti all'uso come pattern.

Scegli un gruppo di controllo simile a quello di trattamento: stesso template, traffico paragonabile, stesso tipo di intento di ricerca. Assegna le pagine ai gruppi prima di guardare i risultati, non dopo.

Come viene calcolato il risultato

1. Finestre. Il periodo pre-rilascio comprende i 28 giorni precedenti la data di inizio; il periodo post-rilascio va dalla data di inizio alla data di fine oppure al giorno più recente disponibile.
2. Indicizzazione. I valori giornalieri di ciascun gruppo dopo il rilascio vengono divisi per la media giornaliera dello stesso gruppo prima del rilascio, quindi 1.0 significa "come prima". In questo modo un gruppo di trattamento piccolo e uno di controllo grande risultano sulla stessa scala.
3. Uplift. L'uplift relativo è l'indice medio del trattamento meno quello del controllo: +0.12 significa che il trattamento ha fatto 12 punti percentuali meglio rispetto alla propria baseline.
4. Test. Il test t di Welch confronta i valori giornalieri indicizzati dei due gruppi senza assumere varianze uguali e fornisce un p-value, un intervallo di confidenza al 95% e il d di Cohen come misura della dimensione dell'effetto (trascurabile sotto 0.2, piccolo sotto 0.5, medio sotto 0.8, grande da 0.8).
5. Vincitore. Il risultato è significativo quando p è inferiore a 0.05; il Vincitore è allora il trattamento o il controllo (per la posizione, un valore più basso è migliore). In caso contrario il risultato è Non conclusivo.
6. Differenza cumulata. Giorno per giorno dal rilascio, AutoPSEO somma il valore effettivo del trattamento meno quello che avrebbe avuto seguendo il controllo (la sua media pre-rilascio × l'indice del controllo): i clic aggiuntivi, o qualunque metrica tu abbia scelto, prodotti dalla modifica.

Risultati del test statistico mostra anche l'Effetto minimo rilevabile, pari a circa 2.8 errori standard della differenza: il più piccolo uplift che questo esperimento potrebbe rilevare in modo affidabile con una potenza dell'80%. Quando un risultato non è significativo, confronta l'effetto atteso con questo valore prima di concludere che la modifica non abbia avuto alcun effetto.

Leggere i risultati

Apri un esperimento dall'elenco per vedere l'Uplift relativo, la variazione di ciascun gruppo rispetto al periodo pre-rilascio, il p-value e il Vincitore. I grafici mostrano l'indice giornaliero di entrambi i gruppi con il rilascio evidenziato e la differenza cumulata dal rilascio. Le tabelle suddividono il risultato per gruppo, per metrica con intervalli di confidenza, per pagina (le 300 pagine con il maggior volume post-rilascio) e per giorno. Contrassegna un esperimento come completato quando hai finito; resta nell'elenco insieme ai suoi risultati.

Quando fidarsi

La pagina ti avvisa quando:

• sono trascorsi meno di 14 giorni dal rilascio;
• sono disponibili meno di 14 giorni pre-rilascio;
• con clic o impressioni come metrica, uno dei due gruppi ha registrato in media meno di 5 al giorno prima del rilascio, per cui il rumore quotidiano prevale;
• un gruppo non aveva alcun traffico prima del rilascio, quindi la sua variazione non è misurabile.

Anche un risultato significativo è osservazionale, non uno studio randomizzato: un'altra modifica rilasciata su un gruppo, o un aggiornamento di ranking che ha colpito in modo diverso i due template, può spacciarsi per il tuo effetto. Registra con un'annotazione il rilascio e qualsiasi altro evento avvenuto durante il test.

Testare senza irritare Google

Questo report confronta gruppi di pagine reali, quindi non è necessario servire varianti a Google. Se invece esegui un test A/B con URL di variante, Google chiede di non mostrare a Googlebot contenuti diversi da quelli visti dagli utenti, di far puntare le varianti all'originale con rel="canonical", di usare reindirizzamenti temporanei (302) e di concludere il test una volta ottenuto un risultato (Best practice per i test A/B nella Ricerca).

Come ti aiuta AutoPSEO

Le attività di aggiornamento e ottimizzazione del motore di contenuti modificano una pagina alla volta (mantenere aggiornati gli articoli). Per valutare se queste modifiche ripagano, inserisci gli articoli aggiornati in un gruppo di trattamento, articoli simili non toccati nel controllo, e usa la data in cui è andato online il primo aggiornamento.