Türkçe
Test bir şey söyleyebilmeden önce her varyantın kaç ziyaretçiye ihtiyacı olduğu ve senin trafiğinde bunun kaç gün ettiği. Saptamaya değer en küçük artışı, güveni ve gücü ayarla; sayıyı altındaki formülle birlikte oku.
Son güncelleme
Coddy, tarayıcında gerçek kod yazarak öğretir: etkileşimli dersler, anında geri bildirim ve takıldığında yapay zekâ desteği.
Örneklem büyüklüğü, test başlamadan önce kendine verdiğin bir sözdür: "Sonuca bu kadar kişi gördüğünde bakacağım, daha önce değil." O olmadan her A/B testi aynı hikâyeye kayar. İlk hafta umut verici görünür, ikinci hafta artış küçülür, biri anlamlı olup olmadığını sorar ve test, çubuğun yeşile döndüğü gün biter. Bu sayfa sana plana yazacağın sayıyı verir; böylece bitiş tarihi bir ruh hâli değil, bir olgu olur.
Hesaplama, Evan Miller'ın ve Optimizely'nin hesaplayıcılarının arkasındaki standart iki oranlı örneklem büyüklüğüdür ve dört şeye bağlıdır: taban oran, saptayabilmek istediğin artış, güven düzeyi ve güç. Güç, insanların atladığıdır. %80 güçte, adını koyduğun büyüklükteki gerçek bir artış on seferde sekiz yakalanır; örneklemi yarı olan bir testin gücü yarının çok altındadır; bu yüzden gücü yetersiz bir test "daha kaba bir cevap" değil, genellikle hiç cevap değildir.
Sonucun altındaki eğri, hatırlamaya değer kısımdır. Gereken ziyaretçi, artışın tersinin karesiyle büyür: görmek istediğin artışı yarıya indir, yaklaşık dört kat trafiğe ihtiyacın olur. %30'luk bir artışı iki haftada doğrulayabilen bir site, %10'luk birini doğrulamak için yaklaşık dokuz kat daha uzun süreye ihtiyaç duyar. Gün sayısı ay olarak çıkıyorsa, hesaplayıcı sana beklemeni söylemeden önce daha büyük bir şey test etmeni ya da huninin daha üstüne, daha çok kişinin ulaştığı bir ölçüte çıkmanı söylüyordur.
Testin değiştireceği sayfanın veya adımın oranını kullan; testin göreceği türden ziyaretçiler üzerinde ölçülmüş olsun. Tek bir huni adımını test ederken site geneli ortalama kullanma.
Hangi artış sana değişikliği yayına aldırırdı, onu sor. Bu senin en küçük saptanabilir etkindir. Olgun bir sayfa için %10 göreli yaygın bir seçimdir; bir yeniden tasarım %20 veya daha fazlasını haklı çıkarabilir.
%95 güven ve %80 güç gelenektir. Sahte bir kazananı geri almak pahalıysa güveni yükselt; kaçırılan bir kazananı masada bırakmak pahalıysa gücü yükselt.
Bütün varyantlar birlikte, yalnızca teste ulaşacak ziyaretçiler sayılarak. Sonuç güne ve tam haftaya çevrilir.
Hesaplayıcı sana varyant başına örneklem büyüklüğünü verir. Bunu, ima ettiği tarihle birlikte test planına koy ve ondan önce sonuç okuma. Gözetleme simülatörü sekmesi nedenini gösterir.
%95 güven ve %80 güçte, çift yönlü, varyant başına ziyaretçi. İki kollu bir test için ikiyle çarp.
| Taban oran | +%5 artış | +%10 artış | +%20 artış | +%50 artış |
|---|---|---|---|---|
| %1 | yaklaşık 637,000 | yaklaşık 163,000 | yaklaşık 42,700 | yaklaşık 7,800 |
| %3 | yaklaşık 208,000 | yaklaşık 53,200 | yaklaşık 13,900 | yaklaşık 2,500 |
| %5 | yaklaşık 122,000 | yaklaşık 31,200 | yaklaşık 8,200 | yaklaşık 1,500 |
| %10 | yaklaşık 57,800 | yaklaşık 14,800 | yaklaşık 3,800 | yaklaşık 690 |
| %20 | yaklaşık 25,600 | yaklaşık 6,500 | yaklaşık 1,700 | yaklaşık 290 |
Taban %5, en küçük saptanabilir etki %10 (hedef %5.5), %95 güven, %80 güç, çift yönlü. Sonuç: varyant başına yaklaşık 31,000 ziyaretçi, toplam 62,000.
Günde 1,000 ziyaretçiyle bu 62 gün, yani dokuz tam hafta. Birçok ekip buna fazla uzun der ve ya daha cesur bir değişiklik test eder ya da bu sayfanın iki haftada test edilebilir olması için %20 veya daha fazla artış gerektiğini kabul eder.
Taban %3, en küçük saptanabilir etki %20 (hedef %3.6). Sonuç: varyant başına yaklaşık 13,900 ziyaretçi.
Daha düşük taban oranlar aynı göreli artış için daha çok ziyaretçi gerektirir, çünkü sayılacak daha az dönüşüm vardır. Burada %20'lik göreli artış yalnızca 0.6 puandır ve testin %3.0'ı %3.6'dan ayırt etmesi gerekir.
Taban %5, artış %10, kontrol dahil dört varyant. Karşılaştırma başına alfa 0.05 / 3 olur ve varyant başına örneklem yaklaşık üçte bir büyür; toplam, varyant başına rakamın dört katıdır.
Varyant eklemek, iki haftalık bir testi iki aylık bir teste çevirmenin en hızlı yoludur. Kontrole karşı tek bir güçlü fikri test et; sonraki fikri ardından çalıştır.
