Örneklem Büyüklüğü
Örneklem büyüklüğü, bir testin her varyantına dahil edilen ziyaretçi veya gözlem sayısıdır ve anlamlı bir farkı kabul edilebilir güvenilirlikle tespit edecek kadar büyük olmalıdır.
Derinlemesine
Gereken örneklem büyüklüğü, başlamadan önce; temel dönüşüm oranınızı, önemsediğiniz minimum tespit edilebilir etkiyi ve seçtiğiniz güven düzeyi ile istatistiksel gücü birleştiren bir güç hesaplamasıyla belirlenir. Daha küçük etkiler, daha düşük temel oranlar ve daha yüksek güven, gereken ziyaretçi sayısını bazen çarpıcı biçimde yükseltir; bu yüzden düşük trafikli sayfalardaki iddialı testler aylar sürebilir.
En yaygın tuzak yetersiz güçtür: bir testi çok az ziyaretçiyle bitirmek, denemeler arasında dalgalanan ve ekipleri yanlış varyantı yayınlamaya iten gürültülü sonuçlar üretir. Bir quiz hunisi bağlamında, örneklem büyüklüğünü önceden hesaplamak net bir bitiş çizgisi belirler, erken dikizlemeyi önler ve tasarım ile mühendislik zamanı harcamadan önce planlanan bir testin haftalık trafiğinizle uygulanabilir olup olmadığını söyler.
Pratikte örnek
Sıkça sorulan sorular
Doğru örneklem büyüklüğünü nasıl hesaplarım?
Temel dönüşüm oranınızı, minimum tespit edilebilir etkiyi, güven düzeyini ve istatistiksel gücü dikkate alan bir güç hesaplayıcısı kullanın. Bu, testi başlatmadan önce varyant başına gereken ziyaretçi sayısını verir.
Örneklem büyüklüğüm çok küçükse ne olur?
Yetersiz güçlü bir test, yanlışlıkla bir kazanan ilan edebilen veya gerçek bir farkı kaçırabilen gürültülü, kararsız sonuçlar üretir. Dönüşümleri gerçekte iyileştirmeyen değişiklikleri yayınlama riski taşırsınız.
Düşük trafikli bir quiz hunisinde A/B testi yürütebilir miyim?
Yürütebilirsiniz, ancak küçük etkiler makul bir sürede ürettiğinizden daha fazla trafik gerektirebilir. Önce örneklem büyüklüğünü hesaplayarak testin uygulanabilir olduğunu doğrulayın veya daha büyük, daha cesur değişikliklere odaklanın.