Bir A/B testi yürüttün — şimdi sonucun istatistiksel olarak anlamlı olup olmadığını kontrol et. Kontrol (A) ve varyasyonunun (B) ziyaretçi ve dönüşüm sayılarını gir, bir güven düzeyi seç; dönüşüm oranı, artış, anlamlılık ve p-değerini anında gör.
Yukarıya ziyaretçi ve dönüşüm sayılarını gir, ardından sonucu ve dağılım grafiğini görmek için Hesapla'ya tıkla.
Tek tıkla üç yanıt — ne hesap tablosu ne de istatistik diploması gerekli.
Her iki versiyonun dönüşüm oranını yan yana ve varyasyonunuzun kontrole göre göreli artışını görün.
Ki-kare testi, seçtiğin güven düzeyinde (%90, %95 veya %99) farkın gerçek mi yoksa yalnızca gürültü mü olduğunu söyler.
Otomatik SRM kontrolü, trafik dağılımın bozulduğunda seni uyarır — bu, yanıltıcı test sonuçlarının yaygın bir nedenidir.
Bir sonuç, kontrol grubun ile varyasyon arasındaki farkın rastlantısal olma ihtimali düşük olduğunda istatistiksel olarak anlamlıdır. Bu eşiğin ne kadar katı olduğunu güven düzeyi ile belirlersin: %95'te, hesap makinesi en az %95 güvene ulaştığında sonuç anlamlı sayılır.
Örnek: Kontrol grubu (A) 85.000 ziyaretçi ve 3.326 dönüşüme sahip — dönüşüm oranı %3,91. Varyasyon (B) 83.000 ziyaretçi ve 3.403 dönüşüme sahip — dönüşüm oranı %4,10, artış %4,78. Sonuç %95 eşiğini aşıyor (yaklaşık %97,5 güven), dolayısıyla bu test anlamlıdır.
P-değeri, varyasyonun gerçek bir etkisi olmadığı durumda en az bu büyüklükte bir fark gözlemleme olasılığıdır. Daha küçük bir p-değeri, daha güçlü kanıt anlamına gelir. %95 güven düzeyinde 0,05 veya daha düşük bir p-değeri aranır. Bu hesap makinesi tek taraflı p-değeri raporlar — varyasyonun gözlemlenen yönde kontrolden daha iyi olup olmadığını test eder.
%95, dönüşüm optimizasyonunda yaygın olarak kullanılan varsayılan değerdir — gerçek kazananları tespit etmek ile yanlış pozitifleri önlemek arasında iyi bir denge sağlar. Yanlış bir karar maliyetli olacaksa ve kesinlikten emin olmak istiyorsan %99'u seç; belirsizliği kabul ettiğin erken, düşük riskli okumalar için yalnızca %90'ı kullan.
SRM, ziyaretçilerin kontrol ve varyasyon arasında planladığın şekilde bölünmediği durumlarda ortaya çıkar (örneğin, planlanan 50/50 bölünmenin 55/45 olarak sonuçlanması). Bu durum genellikle teknik bir soruna işaret eder — yönlendirme sorunları, botlar veya izleme açıkları — ve sonucunu sessiz sedasız geçersiz kılabilir. Hesap makinesi SRM işaretlerse, herhangi bir anlamlılık değerine güvenmeden önce bölünmeyi düzelt.
Anlamlılık, farkın muhtemelen gerçek olduğunu söyler; işletmen için anlamlı olup olmadığını veya zaman içinde istikrarlı kalıp kalmayacağını değil. Bir varyasyonu herkese sunmadan önce yükselişin büyüklüğünü, test süresini (tam iş döngülerini kapsayacak şekilde), örneklem büyüklüğünü ve sonucun temel segmentlerde geçerli olup olmadığını da göz önünde bulundur.
Varify.io, trafik bazlı fiyatlandırma yapan test araçlarına GDPR uyumlu, çerez gerektirmeyen bir alternatiftir. Aylık €199'dan başlayan sabit ücret — ne kadar trafik aldığından veya kaç deney yürüttüğünden bağımsız olarak.
30 günlük ücretsiz denemenizi başlatınKredi kartı gerekmez · Almanya'da üretildi ve barındırılıyor