الموارد · 26
إجراء تجربة A/B تدعم اتخاذ قرار سليم.
تحديد الفرضية، والتخصيص، والمقياس الأساسي، والضوابط قبل مقارنة المتغيرات.
مُحدَّث · 2 min
ما يُساعد هذا الدليل على تحقيقه
- التسجيل المسبق للبروتوكول
- التحقق من التخصيص
- مراقبة الضوابط
- اتخاذ القرار في ظل عدم اليقين
فحص سريع
- ما هي الفرضية الدقيقة التي يمكن دحضها؟
- ما هي الوحدة التي تتلقى المتغير؟
- هل يتطابق التخصيص الملاحظ مع الخطة؟
- ما الضرر الذي يستدعي التوقف؟
- هل تم تحديد المدة والشرائح قبل رؤية النتائج؟
طريقة خطوة بخطوة
- 1
تحديد التغيير المقترح
كتابة الآلية المتوقعة، والفئة المستهدفة، والتأثير على أحد المقاييس الرئيسية. وصف المخاطر المحتملة المتعلقة بإمكانية الوصول والخدمة.
المُخرَج: الفرضية المؤرخة ومعايير النجاح.
- 2
تحديد التخصيص
اختيار وحدة التوزيع العشوائي والحفاظ على ثبات التخصيص عبر الزيارات. استبعاد البرامج الآلية وتحديد الشرائح الخارجة عن النطاق قبل الإطلاق.
المُخرَج: بروتوكول التخصيص والاستثناءات.
- 3
الجهاز والاختبار
التحقق من التعرض والتحويل وأحداث الضوابط لكلا المتغيرين. اختبار حالات الهاتف المحمول ورفض الموافقة والخطأ.
المُخرَج: سجل ضمان الجودة لكلا المسارين.
- 4
التحقق من نسبة العينة
مقارنة التخصيصات المرصودة والمتوقعة قبل قراءة تأثير العلاج. قد يكشف عدم التطابق عن عيوب في التخصيص أو القياس أو الاستهداف.
المُخرَج: التحقق من النسبة وتشخيص التباين.
- 5
التحليل في الوقت المُخطط له
الالتزام بالإطار الزمني المُختار والإبلاغ عن عدم اليقين والمقياس الأساسي والأضرار وتحليل الشريحة المُخطط له. فحص المفاجآت دون اختيار الرقم المُناسب فقط بعد حدوثها.
المُخرَج: التحليل مع مراعاة القيود وعدم اليقين.
- 6
اتخاذ القرار والمتابعة
تعيين مسؤول عن الإطلاق أو التخلي أو اختبار آخر. بعد الإطلاق، التحقق من ثبات التأثير والضوابط.
المُخرَج: قرار مؤرشف وفحص ما بعد الإطلاق.
مؤشرات الإدارة
| المؤشر | ما يقيسه | الإجراء الأول |
|---|---|---|
| التعيين | نسبة العينة المتوقعة مقابل المُلاحَظة | التشخيص قبل التحليل |
| التعرض | المستخدمون المؤهلون الذين تعرضوا فعليًا | استهداف الإصلاح |
| التأثير | تغيير المقياس الأساسي وعدم اليقين | تطبيق قاعدة القرار المُخطَّطة |
| الضوابط | الأخطاء، زمن الاستجابة، والتخلي لكل متغير | إيقاف المعالجة الضارة مؤقتًا |
الأخطاء الشائعة
- التوقف عندما يبدو الرقم مُلائمًا للوهلة الأولى
- جمع العديد من المقاييس دون مقياس أساسي
- تجاهل عدم تطابق نسبة العينة
- التعامل مع شريحة صغيرة كدليل عام
الأسئلة المتكررة
هل نسبة العينة مجرد إجراء شكلي؟
لا. قد يؤدي عدم التطابق غير المُفسَّر إلى جعل المقارنة غير موثوقة.
هل ينبغي التحقق من التحويل يوميًا؟
تساعد المراقبة التشغيلية، لكن تغيير المدة أو قاعدة القرار استجابةً للنتائج يُضعف التفسير المُخطط له.
ماذا لو كانت النتيجة غير مؤكدة؟
الإبلاغ عن عدم اليقين وحجم التأثير المُحتمل، ثم تحديد ما إذا كانت تجربة أخرى ذات قيمة حقيقية.
المراجع الرسمية
تدعم المراجع الطريقة. قم بتكييف عمليات التحقق مع سياقك؛ فهي ليست شهادة. قد تكون عناوين المراجع الأصلية والوثائق المصدرية بلغة أخرى.
