A/B Testi
A/B testi, bir sayfanın ya da öğenin iki versiyonunu, trafiği aralarında bölerek hangisinin daha iyi sonuç ürettiğini öğrenmek için karşılaştıran kontrollü bir deneydir.
Derinlemesine
A/B testi, kitlenizin rastgele bölünmüş yarılarını aynı anda bir kontrole (A) ve bir varyanta (B) göndererek başlık veya düğme metni gibi tek bir değişkeni yalıtır. İkisini eşzamanlı çalıştırmak mevsimsellik ile trafik kaynağı değişimlerini kontrol altında tutar ve anlamlılık testi, gözlenen farkın gerçek mi yoksa yalnızca gürültü mü olduğunu söyler. Asıl ustalık, her seferinde anlamlı tek bir şeyi değiştirmektir; böylece elde edilen her artışı belirli bir nedene bağlayabilirsiniz.
Potansiyel müşteri niteleme akışında A/B testi, quiz başlangıçlarını, tamamlanmalarını ve müşteri gönderimlerini gerçekten neyin hareketlendirdiği konusunda görüşleri kanıta dönüştürür. Yaygın bir hata, test kazanan gibi göründüğü anda durdurmaktır; önceden belirlenmiş örneklem büyüklüğüne ulaşmadan erken sonlandırmak, tekrarlanamayan yanlış pozitifler üretir. Aynı derecede önemlisi, yüksek etkili öğeleri önce test etmektir; çünkü önemsiz ayrıntıları yeniden düzenlemek, bir deneyin tükettiği trafiği haklı çıkaracak kadar artış nadiren sağlar.
Pratikte örnek
Sıkça sorulan sorular
Bir A/B testi ne kadar sürmelidir?
Önceden belirlenmiş bir örneklem büyüklüğüne ve en az bir veya iki tam iş döngüsüne, genellikle bir ila dört haftaya ulaşana kadar çalıştırın. Yalnızca süreye göre bitirmek veya bir varyant iyi göründüğünde erken durdurmak güvenilirliği zayıflatır.
Bir A/B testi kaç varyasyona sahip olabilir?
Saf bir A/B testi iki versiyonu karşılaştırır, ancak A/B/n testinde daha fazla varyant ekleyebilirsiniz. Her ek varyant trafiği daha da böler ve anlamlılığa ulaşmak için daha fazla toplam ziyaretçi gerektirir.
A/B testinde istatistiksel anlamlılık nedir?
Varyantlar arasında ölçülen bir farkın rastlantı değil gerçek olduğuna dair güvendir ve genellikle %95 güven düzeyi olarak ifade edilir. Buna ulaşmak yalnızca yeterli ziyaretçi değil, yeterli dönüşüm gerektirir.