العربية
السؤال الذي تطرحه قبل الاختبار الأول، لا بعد العاشر. أدخل زوارك الشهريين، ومعدل تحويلك، والتحسن الذي ستتصرف بناءً عليه فعلًا، واحصل على جواب مباشر: انطلق، أو بجهد، أو توقف وافعل شيئًا آخر.
آخر تحديث
يعلّمك Coddy عبر كتابة كود حقيقي في متصفحك: دروس تفاعلية، وملاحظات فورية، ومساعدة بالذكاء الاصطناعي عندما تتعثر.
كل دليل لاختبارات A/B كتبته شركة لديها ملايين الزوار. فريق التجريب في Microsoft، وGoogle، وBooking.com، وAirbnb تجري آلاف الاختبارات سنويًا، ونصيحتها صحيحة لها: اختبر كل شيء، ثق بالبيانات، أطلق ما يفوز. شركة ناشئة لديها 8,000 زائر في الشهر تقرأ النصيحة نفسها، وتبني اللوحة نفسها، ثم لا تفهم لماذا ينتهي كل اختبار عند ثقة 87% بتحسن ينكمش كل أسبوع. هي لا تفعل ذلك بشكل خاطئ. هي تفعل شيئًا لا يعمل بذلك الحجم.
هذه الصفحة تجري الحساب الذي تتخطاه الأدلة. عند 8,000 زائر في الشهر يحوّلون بمعدل 3%، تأكيد تحسن 10% يحتاج إلى نحو 106,000 زائر: ثلاثة عشر شهرًا من كل زائر لديك، مع تجميد الصفحة طوال الوقت. وفي أربعة أسابيع، أصغر تحسن يمكنك تأكيده نحو 40%. هذه ليست مشكلات ضبط. روني كوهافي، الذي أدار التجريب في Microsoft وAirbnb، يضع الحد الأدنى العملي لرصد تحسنات من خانة واحدة عند بضع مئات الآلاف من المستخدمين؛ وتحت ذلك يقترح أن اختبار A/B قد يكون سابقًا لأوانه وأن بحث المستخدمين إنفاق أفضل.
نكتب هذا من التجربة. لوحة Coddy نفسها أجرت نحو عشرين تجربة مسماة، عشر منها اختبارات تسعير على بلدان مفردة، كل منها على شريحة صغيرة من الزيارات، وكانت تعرض «واصل التشغيل» كلما كانت الثقة تحت 95%. وعدة منها عُدّت ناجحة وأُطلقت. وبالنظر إلى الوراء بهذه الحاسبة، بعض تلك الاختبارات لم يكن بوسعها رصد التحسنات التي نُسبت إليها. النسخة الأمينة من تلك اللوحة هي هذه الصفحة: ما الذي تستطيع هذه الزيارات الإجابة عنه، وكم سيستغرق، وكم مرة سيكون الفائز إنذارًا كاذبًا؟
لا الموقع كله. إذا كان الاختبار على صفحة التسعير، فهم زوار صفحة التسعير. وإذا كان خطوة دفع، فهم من يصلون إلى تلك الخطوة.
الحاسبة تعرض التحويلات الشهرية التي يعنيها هذا، وهي القيد الحقيقي.
التحسن النسبي الذي سيجعلك تطلق التغيير. معظم الناس يقولون 10% ويعنونها؛ كن صادقًا إن كان تحسنك أصغر.
انطلق تعني أقل من شهر. وبجهد تعني أقل من ربع سنة، مع تجميد الصفحة طوال الوقت. وتوقف تعني أن الاختبار لا يستطيع الإجابة عن السؤال بزياراتك. والسلّم يبين كم ستكلف التحسنات الأكبر بدلًا من ذلك.
اختر كم مرة تنجح أفكارك فعلًا. البطاقة تبين أي حصة من النتائج الدالة ستكون إنذارات كاذبة عند ذلك المعدل، وهو الرقم الذي تتذكره في المرة القادمة التي يخرج فيها اختبار أخضر.
ذراعان، وكل زائر يدخل الاختبار. اقرأ صفك وعمودك.
| الزوار الشهريون | أساس 1% | أساس 3% | أساس 5% | أساس 10% |
|---|---|---|---|---|
| 3,000 | أكثر من 100 شهر | 35 شهرًا | 21 شهرًا | 9.8 أشهر |
| 8,000 | 41 شهرًا | 13 شهرًا | 7.8 أشهر | 3.7 أشهر |
| 25,000 | 13 شهرًا | 4.3 أشهر | 2.5 شهر | 5 أسابيع |
| 100,000 | 3.3 أشهر | 5 أسابيع | 19 يومًا | 9 أيام |
| 500,000 | 20 يومًا | 6 أيام | 4 أيام | يومان |
8,000 زائر في الشهر، معدل تسجيل 3%، تريد رؤية تحسن 10%. الحكم: توقف. نحو 13 شهرًا و106,000 زائر. في أربعة أسابيع أصغر تحسن قابل للتأكيد نحو 40%.
مئتان وأربعون تسجيلًا في الشهر لا تستطيع حسم فرق 0.3 نقطة. وقت الفريق يُنفق بشكل أفضل على مقابلة خمسة مستخدمين وعلى تغييرات كبيرة بما يكفي لتظهر بلا اختبار: عنوان جديد ليس منها؛ ونموذج تسعير جديد قد يكون.
50,000 زائر في الشهر، معدل اشتراك في النشرة 2%، يريد تحسن 10%. الحكم: بجهد. نحو 3.2 أشهر. في أربعة أسابيع أصغر تحسن قابل للتأكيد نحو 19%.
قابل للاختبار، لكن للتغييرات الجريئة فقط. اختبار موضع النموذج مقبول إذا كان قد يحرك الاشتراكات بالخُمس؛ أما اختبار نص الزر فلا. أو اختبر بدلًا من ذلك على النقرة إلى النموذج، التي يقوم بها زوار أكثر بكثير.
400,000 زائر في الشهر، تحويل 4%، تريد تحسن 10%. الحكم: انطلق. الزوار يصلون في أقل من أسبوع؛ شغّل أسبوعين كاملين على أي حال.
هذا هو الحجم الذي كُتبت له أدلة اختبارات A/B. الخطر المتبقي هو معدل الأساس: إذا كانت فكرة واحدة من كل خمس تنجح فعلًا، فنحو فائز دال واحد من كل ستة ما زال إنذارًا كاذبًا، وتبويب محاكي الاستراق يبين كم يسوء ذلك بسرعة مع الفحوصات اليومية.
