Expérimentation : testez si une modification SEO a fait évoluer votre trafic

L'expérimentation répond à la question que soulève chaque modification SEO : a-t-elle fonctionné, ou est-ce l'ensemble du site qui a bougé ? Vous définissez un groupe test (les pages que vous avez modifiées), un groupe contrôle (des pages similaires laissées intactes) et une date de lancement. AutoPSEO compare chaque groupe après le lancement avec ses propres 28 jours précédents, puis vérifie si l'écart entre les deux dépasse le bruit habituel. Comme le groupe de contrôle subit la même saisonnalité, les mêmes mises à jour de Google et les mêmes variations de la demande, cette méthode isole votre modification bien plus efficacement qu'un simple avant/après.

Créer une expérience

Cliquez sur Nouvelle et renseignez les champs suivants :

• Nom et Hypothèse : ce que vous avez modifié et ce que vous attendez, par exemple « Le balisage FAQ sur les guides produits augmente le CTR de 10 % ».
• Date de début : le jour de la mise en ligne de la modification. La date de fin est facultative ; sans elle, l'expérience court jusqu'au dernier jour pour lequel des données sont disponibles.
• Métrique : Clics, Impressions, CTR ou Position. Les quatre sont calculées ; celle-ci désigne le gagnant.
• Groupe test et Groupe de contrôle : chacun est soit une liste d'URL (jusqu'à 500 URL absolues), soit un motif d'URL (regex), par exemple ^https://www.example.com/guides/.

Deux raccourcis facilitent la constitution des groupes. Importer un CSV de groupes d'URL lit un fichier comportant les colonnes url et group ; le premier groupe du fichier devient le contrôle et le second le test. Suggérer des groupes automatiquement charge vos pages les plus performantes des 28 derniers jours et propose des groupes par premier dossier (tout dossier contenant au moins trois pages), prêts à être utilisés comme motifs.

Choisissez un groupe de contrôle qui ressemble au groupe test : même gabarit, trafic comparable, même type d'intention de recherche. Répartissez les pages dans les groupes avant de consulter les résultats, et non après.

Comment le résultat est calculé

1. Fenêtres. La période de référence correspond aux 28 jours précédant la date de début ; la période d'observation court de la date de début jusqu'à la date de fin, ou jusqu'au jour le plus récent disponible.
2. Indexation. Les valeurs quotidiennes de chaque groupe après le lancement sont divisées par la moyenne journalière de ce même groupe avant le lancement ; 1,0 signifie donc « comme avant ». Cela place un petit groupe test et un grand groupe de contrôle sur la même échelle.
3. Gain. Le gain relatif est l'indice moyen du groupe test moins celui du groupe de contrôle : +0.12 signifie que le groupe test a fait 12 points de pourcentage de mieux par rapport à sa propre base de référence.
4. Test. Le test t de Welch compare les valeurs quotidiennes indexées des deux groupes sans supposer l'égalité des variances. Il fournit une valeur p, un intervalle de confiance à 95 % et le d de Cohen comme taille d'effet (négligeable en dessous de 0.2, faible en dessous de 0.5, moyen en dessous de 0.8, fort à partir de 0.8).
5. Gagnant. Le résultat est significatif lorsque p est inférieur à 0.05 ; le gagnant est alors le groupe test ou le groupe de contrôle (pour la position, une valeur plus basse est meilleure). Sinon, le résultat est non concluant.
6. Écart cumulé. Jour après jour depuis le lancement, AutoPSEO additionne la valeur réelle du groupe test moins ce qu'elle aurait été si le groupe test avait suivi le contrôle (sa moyenne avant lancement × l'indice du contrôle) : c'est le surplus de clics, ou de la métrique choisie, produit par la modification.

Les résultats du test statistique affichent également l'effet minimal détectable, soit environ 2.8 erreurs standard de la différence : le plus petit gain que cette expérience pouvait détecter de façon fiable avec une puissance de 80 %. Lorsqu'un résultat n'est pas significatif, comparez l'effet que vous espériez à cette valeur avant de conclure que la modification n'a eu aucun effet.

Lire les résultats

Ouvrez une expérience depuis la liste pour consulter le gain relatif, l'évolution de chaque groupe par rapport à sa période précédant le lancement, la valeur p et le gagnant. Les graphiques montrent l'indice quotidien des deux groupes avec le lancement repéré, ainsi que l'écart cumulé depuis le lancement. Des tableaux détaillent le résultat par groupe, par métrique avec intervalles de confiance, par page (les 300 pages au plus fort volume après le lancement) et par jour. Marquez une expérience comme terminée lorsque vous en avez fini avec elle ; elle reste dans la liste avec ses résultats.

Quand lui faire confiance

La page vous avertit dans les cas suivants :

• moins de 14 jours se sont écoulés depuis le lancement ;
• moins de 14 jours de données avant le lancement sont disponibles ;
• avec les clics ou les impressions comme métrique, l'un des groupes a réalisé en moyenne moins de 5 par jour avant le lancement, de sorte que le bruit d'un jour à l'autre domine ;
• un groupe n'avait aucun trafic avant le lancement, ce qui empêche de mesurer son évolution.

Même un résultat significatif reste observationnel et non issu d'un essai randomisé : une autre modification déployée sur l'un des groupes, ou une mise à jour de classement qui a touché différemment les deux gabarits, peut se faire passer pour votre effet. Conservez une annotation du lancement et de tout autre événement survenu pendant le test.

Tester sans contrarier Google

Ce rapport compare des groupes de pages réelles : vous n'avez donc pas besoin de servir des variantes à Google. Si vous menez un test A/B avec des URL de variantes, Google vous demande de ne pas montrer à Googlebot un contenu différent de celui des utilisateurs, de faire pointer les variantes vers l'original avec rel="canonical", d'utiliser des redirections temporaires (302) et de mettre fin au test dès que vous avez un résultat (Bonnes pratiques pour les tests A/B dans la recherche).

Comment AutoPSEO vous aide

Les tâches d'actualisation et d'optimisation du moteur de contenu modifient une page à la fois (garder vos articles à jour). Pour juger si ces modifications portent leurs fruits, placez les articles actualisés dans un groupe test, des articles similaires non modifiés dans le groupe de contrôle, et retenez la date de mise en ligne de la première actualisation.