Nasıl hesaplanır?
İki oran, güven ve güç, tek formülde.
- n = (z₁₋α/₂ × √(2p̄(1 − p̄)) + z₁₋β × √(p₁(1 − p₁) + p₂(1 − p₂)))² ÷ (p₂ − p₁)²
- p₁ = mevcut oran, p₂ = p₁ × (1 + en küçük fark), p̄ = (p₁ + p₂) ÷ 2
- z: standart normal dağılımın güven düzeyi ve güce karşılık gelen değerleri (%95 → 1,96; %80 → 0,84)
- Test süresi = Toplam ziyaretçi ÷ Günlük ziyaretçi
A/B testinin örneklem büyüklüğü, iki sürüm arasındaki belirli bir farkı istatistiksel olarak güvenilir biçimde görebilmek için her sürüme gereken ziyaretçi sayısıdır. Mevcut dönüşüm oranı, yakalamak istenen en küçük fark, güven düzeyi ve güçten hesaplanır.
Küçük farkları yakalamak çok trafik ister: en küçük farkı yarıya indirmek gereken ziyaretçiyi yaklaşık dört katına çıkarır.
Hesaplanan sayıya ulaşmadan testi durdurmak, rastlantısal bir farkı gerçek sanma riskini artırır. Sonuca erken bakıp karar vermeyin.
Süre bir haftadan kısa çıksa da testi en az bir tam hafta çalıştırmak, hafta içi ve hafta sonu davranış farklarını dengeler.
Sınırlar
- Hesap iki oranın karşılaştırıldığı klasik (frekansçı) iki taraflı testi varsayar; Bayesçi ya da sıralı test araçları farklı hesaplar.
- İkiden fazla sürümde çoklu karşılaştırma düzeltmesi yapılmaz; sürüm sayısı arttıkça yanlış pozitif riski artar.
- Trafik sürümlere eşit bölünmezse gereken toplam ziyaretçi artar.
Sık sorulan sorular
A/B testi için kaç ziyaretçi gerekir?
Bağlantıyı kopyalaMevcut dönüşüm oranınıza ve yakalamak istediğiniz farka bağlıdır. %5'lik bir oranda %20'lik göreli farkı %95 güven ve %80 güçle yakalamak için sürüm başına yaklaşık 8.150 ziyaretçi gerekir.
Güven düzeyi ve güç ne demektir?
Bağlantıyı kopyalaGüven düzeyi, gerçekte fark yokken fark var deme riskini sınırlar (%95, bu riskin %5 olması demektir). Güç, gerçekte var olan farkı yakalama olasılığıdır (%80, farkın beşte dördünde yakalanması).
Testi ne kadar süre çalıştırmalıyım?
Bağlantıyı kopyalaHesaplanan ziyaretçi sayısına ulaşana kadar ve en az bir tam hafta. Toplam ziyaretçiyi günlük ziyaretçiye bölerek süreyi tahmin edebilirsiniz.
Testlerinizi birlikte planlayalım.
Hesabınızı 30 dakikada birlikte inceleyelim; nereden başlanacağını söyleyelim.







