Experimente: Prüfen Sie, ob eine SEO-Änderung Ihren Traffic bewegt hat

Mit Experimenten beantworten Sie die Frage, die jede SEO-Änderung aufwirft: Hat sie funktioniert, oder hat sich die ganze Website bewegt? Sie definieren eine Treatment-Gruppe (Seiten, die Sie geändert haben), eine Kontrollgruppe (ähnliche Seiten, die unverändert bleiben) und ein Launch-Datum. AutoPSEO vergleicht jede Gruppe nach dem Launch mit ihren eigenen 28 Tagen davor und prüft, ob der Abstand zwischen beiden das übliche Rauschen übertrifft. Da die Kontrollgruppe Saisonalität, Google-Updates und Nachfrageschwankungen teilt, lässt sich Ihre Änderung damit deutlich besser isolieren als mit einem einfachen Vorher-Nachher-Vergleich.

Experiment erstellen

Klicken Sie auf Neu und füllen Sie die Felder aus:

• Name und Hypothese: Was Sie geändert haben und was Sie erwarten, zum Beispiel „FAQ-Schema auf Produktratgebern steigert die CTR um 10 %".
• Startdatum: der Tag, an dem die Änderung live ging. Das Enddatum ist optional; ohne Angabe läuft das Experiment bis zum letzten Tag mit Daten.
• Metrik: Klicks, Impressionen, CTR oder Position. Alle vier werden ausgewiesen; diese eine entscheidet über den Gewinner.
• Treatment-Gruppe und Kontrollgruppe: jeweils eine URL-Liste (bis zu 500 absolute URLs) oder ein URL-Muster (Regex), etwa ^https://www.example.com/guides/.

Für die Gruppen gibt es zwei Abkürzungen. CSV mit URL-Gruppen hochladen liest eine Datei mit den Spalten url und group ein; die erste Gruppe in der Datei wird zur Kontrollgruppe, die zweite zur Treatment-Gruppe. Gruppen automatisch vorschlagen lädt Ihre Top-Seiten der letzten 28 Tage und schlägt Gruppen nach dem ersten Ordner vor (jeder Ordner mit mindestens drei Seiten), direkt als Muster verwendbar.

Wählen Sie eine Kontrollgruppe, die der Treatment-Gruppe ähnelt: gleiches Template, vergleichbarer Traffic, gleiche Art von Suchintention. Ordnen Sie die Seiten den Gruppen zu, bevor Sie die Ergebnisse sehen, nicht danach.

So wird das Ergebnis berechnet

1. Zeitfenster. Der Vorzeitraum umfasst die 28 Tage vor dem Startdatum; der Nachzeitraum reicht vom Startdatum bis zum Enddatum oder zum neuesten verfügbaren Tag.
2. Indexierung. Die Tageswerte jeder Gruppe nach dem Launch werden durch den durchschnittlichen Tageswert derselben Gruppe vor dem Launch geteilt, sodass 1,0 „wie zuvor" bedeutet. So liegen eine kleine Treatment-Gruppe und eine große Kontrollgruppe auf derselben Skala.
3. Uplift. Der relative Uplift ist der durchschnittliche Index der Treatment-Gruppe minus der durchschnittliche Index der Kontrollgruppe: +0,12 bedeutet, dass die Treatment-Gruppe relativ zu ihrer eigenen Baseline 12 Prozentpunkte besser abgeschnitten hat.
4. Test. Der Welch-t-Test vergleicht die täglichen Indexwerte beider Gruppen, ohne gleiche Varianzen vorauszusetzen, und liefert einen p-Wert, ein 95-%-Konfidenzintervall sowie Cohens d als Effektstärke (vernachlässigbar unter 0,2, klein unter 0,5, mittel unter 0,8, groß ab 0,8).
5. Gewinner. Das Ergebnis ist signifikant, wenn p unter 0,05 liegt; Gewinner ist dann die Treatment- oder die Kontrollgruppe (bei der Position ist ein niedrigerer Wert besser). Andernfalls lautet das Ergebnis Nicht eindeutig.
6. Kumulierte Differenz. Tag für Tag seit dem Launch summiert AutoPSEO den tatsächlichen Wert der Treatment-Gruppe minus den Wert, den sie bei einem Verlauf wie in der Kontrollgruppe gehabt hätte (ihr Durchschnitt vor dem Launch × der Index der Kontrollgruppe): die zusätzlichen Klicks oder die jeweils gewählte Metrik, die Ihre Änderung erzeugt hat.

Unter Ergebnisse des statistischen Tests wird außerdem der minimal nachweisbare Effekt angezeigt, etwa 2,8 Standardfehler der Differenz: der kleinste Uplift, den dieses Experiment bei 80 % Teststärke zuverlässig erkennen kann. Ist ein Ergebnis nicht signifikant, vergleichen Sie Ihren erwarteten Effekt mit diesem Wert, bevor Sie schlussfolgern, die Änderung habe nichts bewirkt.

Ergebnisse lesen

Öffnen Sie ein Experiment aus der Liste, um den relativen Uplift, die Veränderung jeder Gruppe gegenüber ihrem Vorzeitraum, den p-Wert und den Gewinner zu sehen. Die Diagramme zeigen den täglichen Index beider Gruppen mit markiertem Launch sowie die kumulierte Differenz seit dem Launch. Tabellen schlüsseln das Ergebnis nach Gruppe, nach Metrik mit Konfidenzintervallen, nach Seite (die 300 Seiten mit dem größten Volumen nach dem Launch) und nach Tag auf. Markieren Sie ein Experiment als abgeschlossen, wenn Sie fertig sind; es bleibt mitsamt seinen Ergebnissen in der Liste.

Wann Sie dem Ergebnis trauen können

Die Seite warnt Sie, wenn:

• seit dem Launch weniger als 14 Tage vergangen sind;
• weniger als 14 Tage vor dem Launch verfügbar sind;
• bei Klicks oder Impressionen als Metrik eine der Gruppen vor dem Launch im Schnitt weniger als 5 pro Tag erreichte, sodass das tägliche Rauschen dominiert;
• eine Gruppe vor dem Launch gar keinen Traffic hatte, sodass sich ihre Veränderung nicht messen lässt.

Auch ein signifikantes Ergebnis ist beobachtend und kein randomisierter Versuch: Eine weitere Änderung, die nur eine Gruppe betraf, oder ein Ranking-Update, das die beiden Templates unterschiedlich getroffen hat, kann sich als Ihr Effekt ausgeben. Halten Sie den Launch und alles andere, was während des Tests passiert ist, in einer Annotation fest.

Testen, ohne Google zu verärgern

Dieser Bericht vergleicht Gruppen echter Seiten, sodass Sie Google keine Varianten ausspielen müssen. Wenn Sie dennoch einen A/B-Test mit Varianten-URLs durchführen, verlangt Google, Googlebot keine anderen Inhalte zu zeigen als Nutzern, Varianten per rel="canonical" auf das Original zu verweisen, temporäre Weiterleitungen (302) zu verwenden und den Test zu beenden, sobald ein Ergebnis vorliegt (A/B testing best practices for Search).

Wie AutoPSEO hilft

Die Aktualisierungs- und Optimierungsaufgaben der Content-Engine ändern jeweils eine Seite (Artikel aktuell halten). Um zu beurteilen, ob sich diese Änderungen lohnen, legen Sie die aktualisierten Artikel in eine Treatment-Gruppe, ähnliche unveränderte Artikel in die Kontrollgruppe und verwenden das Datum, an dem die erste Aktualisierung live ging.