Deney: Bir SEO değişikliğinin trafiğinizi etkileyip etkilemediğini test edin

Deney, her SEO değişikliğinin ardından akla gelen soruyu yanıtlar: değişiklik işe yaradı mı, yoksa tüm site mi hareketlendi? Bir işlem grubu (değiştirdiğiniz sayfalar), bir kontrol grubu (dokunmadığınız benzer sayfalar) ve bir yayın tarihi tanımlarsınız. AutoPSEO her grubun yayın sonrasındaki performansını kendi önceki 28 günüyle karşılaştırır ve iki grup arasındaki farkın olağan dalgalanmayı aşıp aşmadığını test eder. Kontrol grubu mevsimselliği, Google güncellemelerini ve talep dalgalanmalarını işlem grubuyla paylaştığı için bu yöntem, düz bir öncesi-sonrası karşılaştırmasına kıyasla değişikliğinizin etkisini çok daha iyi ayrıştırır.

Deney oluşturma

Yeni düğmesine basın ve şunları doldurun:

• Ad ve Hipotez: Ne değiştirdiğiniz ve ne beklediğiniz; örneğin "Ürün rehberlerine FAQ şeması eklemek CTR'yi %10 artırır".
• Başlangıç tarihi: Değişikliğin yayına girdiği gün. Bitiş tarihi isteğe bağlıdır; belirtmezseniz deney, verisi bulunan en son güne kadar sürer.
• Metrik: Tıklamalar, Gösterimler, CTR veya Konum. Dördü de raporlanır; kazananı bu metrik belirler.
• İşlem grubu ve Kontrol grubu: Her biri bir URL listesi (en fazla 500 mutlak URL) ya da ^https://www.example.com/guides/ gibi bir URL deseni (regex) olabilir.

Gruplar için iki kısayol vardır. URL gruplarını içeren bir CSV yükle seçeneği, url ve group sütunlarını içeren bir dosyayı okur; dosyadaki ilk grup kontrol, ikinci grup işlem grubu olur. Grupları otomatik öner seçeneği son 28 günün en iyi sayfalarını yükler ve bunları ilk klasöre göre gruplayıp (en az üç sayfası olan her klasör) desen olarak kullanıma hazır önerir.

Kontrol grubunu işlem grubuna benzer seçin: aynı şablon, benzer trafik, aynı tür arama niyeti. Sayfaları gruplara sonuçlara bakmadan önce atayın, sonra değil.

Sonuç nasıl hesaplanır

1. Pencereler. Öncesi dönemi başlangıç tarihinden önceki 28 gündür; sonrası dönemi başlangıç tarihinden bitiş tarihine ya da mevcut en son güne kadar sürer.
2. İndeksleme. Her grubun yayın sonrasındaki günlük değerleri, o grubun yayın öncesindeki kendi ortalama gününe bölünür; böylece 1.0 "eskisi gibi" anlamına gelir. Bu işlem, küçük bir işlem grubunu ve büyük bir kontrol grubunu aynı ölçeğe getirir.
3. Artış. Göreli artış, işlem grubunun ortalama indeksinden kontrol grubunun ortalama indeksinin çıkarılmasıyla bulunur: +0.12, işlem grubunun kendi başlangıç değerine göre 12 yüzde puan daha iyi performans gösterdiği anlamına gelir.
4. Test. Welch t-testi, iki grubun günlük indekslenmiş değerlerini eşit varyans varsaymadan karşılaştırır ve bir p değeri, %95 güven aralığı ve etki büyüklüğü olarak Cohen'in d değerini verir (0.2'nin altında ihmal edilebilir, 0.5'in altında küçük, 0.8'in altında orta, 0.8 ve üzeri büyük).
5. Kazanan. p değeri 0.05'in altındaysa sonuç anlamlıdır; bu durumda Kazanan işlem grubu ya da kontrol grubu olur (konum için düşük değer daha iyidir). Aksi halde sonuç Belirsiz olur.
6. Kümülatif fark. AutoPSEO, yayından itibaren her gün için işlem grubunun gerçek değeri ile kontrol grubunu izleseydi alacağı değer arasındaki farkı (yayın öncesi ortalaması × kontrol grubunun indeksi) toplar: değişikliğin ürettiği ek tıklama sayısı ya da seçtiğiniz diğer metriğin ek değeri.

İstatistiksel Test Sonuçları bölümü ayrıca, farkın standart hatasının yaklaşık 2.8 katı olan Saptanabilir minimum etkiyi de gösterir: bu deneyin %80 güçle güvenilir biçimde saptayabileceği en küçük artıştır. Sonuç anlamlı değilse, değişikliğin hiçbir etki yaratmadığı sonucuna varmadan önce beklediğiniz etkiyi bu değerle karşılaştırın.

Sonuçları okuma

Göreli artış, her grubun yayın öncesi dönemine göre değişimi, p değeri ve Kazananı görmek için listeden bir deney açın. Grafikler, yayın anının işaretlendiği iki grubun günlük indeksini ve yayından itibaren kümülatif farkı gösterir. Tablolar sonucu gruba, güven aralıklarıyla metriğe, sayfaya (yayın sonrası hacmi en yüksek 300 sayfa) ve güne göre ayrıntılandırır. İşiniz bittiğinde bir deneyi tamamlandı olarak işaretleyin; deney sonuçlarıyla birlikte listede kalır.

Sonuca ne zaman güvenilmeli

Sayfa şu durumlarda sizi uyarır:

• yayından bu yana 14 günden az zaman geçtiyse;
• yayın öncesine ait 14 günden az veri varsa;
• metrik tıklama ya da gösterim ise ve gruplardan biri yayın öncesinde günde ortalama 5'ten az değer aldıysa; bu durumda günlük dalgalanma sonucu domine eder;
• bir grubun yayın öncesinde hiç trafiği yoksa; bu durumda değişimi ölçülemez.

Anlamlı bir sonuç bile rastgele atamalı bir deney değil, gözlemsel bir sonuçtur: gruplardan birine uygulanan başka bir değişiklik ya da iki şablonu farklı etkileyen bir sıralama güncellemesi, sizin etkiniz gibi görünebilir. Yayını ve test sırasında yaşanan diğer tüm gelişmeleri bir not olarak kaydedin.

Google'ı rahatsız etmeden test yapmak

Bu rapor gerçek sayfa gruplarını karşılaştırır; dolayısıyla Google'a varyant sunmanız gerekmez. Varyant URL'leriyle A/B testi yapıyorsanız Google, Googlebot'a kullanıcılardan farklı içerik göstermemenizi, varyantları rel="canonical" ile orijinale yönlendirmenizi, geçici (302) yönlendirmeler kullanmanızı ve sonuç aldığınızda testi sonlandırmanızı ister (Arama için A/B testi en iyi uygulamaları).

AutoPSEO nasıl yardımcı olur

İçerik motorunun yenileme ve optimizasyon görevleri sayfaları tek tek değiştirir (makaleleri güncel tutma). Bu değişikliklerin karşılığını verip vermediğini değerlendirmek için yenilenen makaleleri bir işlem grubuna, dokunulmamış benzer makaleleri kontrol grubuna koyun ve ilk yenilemenin yayına girdiği tarihi başlangıç tarihi olarak kullanın.