اختبار A/B: حجم الأثر والفاصل والدلالة

الدلالة الإحصائية لا تضمن صحة النتيجة أو أهميتها أو قابليتها للتكرار. يجب أن يراعي القرار البروتوكول وحجم الأثر وعدم اليقين أيضًا.

تفسير قيمة p بدقة

تصف قيمة p، في ظل الفرضية الصفرية وافتراضات الاختبار، احتمال نتيجة لا تقل تطرفًا عن المرصودة. ليست احتمال صحة الفرضية ولا احتمال أن تكون المصادفة وحدها سبب النتيجة. خطّط المقارنات قبل التحليل.

مثال افتراضي بفاصل واسع

مع 100 مشترٍ من 2000 في A و120 من 2000 في B، يعطي التقريب الطبيعي غير المصحح لمجموعتين مستقلتين فاصلًا بنسبة 95 بالمئة لفرق B ناقص A يقارب −0.41 إلى +2.41 نقطة مئوية. يشمل الصفر، فلا يثبت تفوقًا حاسمًا ولا تكافؤًا.

100 * (0.01 +/- 1.96 * sqrt(0.05 * 0.95 / 2000 + 0.06 * 0.94 / 2000))

احترام طريقة الإيقاف المختارة

في تحليل بأفق ثابت، لا تتوقف عند أول عتبة مواتية بعد مراجعات متكررة. يجب أن تراعي الطريقة التسلسلية تلك التحليلات. أبلغ عن مقاييس الحماية والحدود؛ فقد يظل أثر نسبي كبير غير مؤكد أو قليل الأهمية العملية.

المصادر والتحقق

تم التحقق في 1 نوفمبر 2026

• ASA — Statement on statistical significance and p-values
• NIST — Difference of Proportions Confidence Interval
• Kharitonov et al. — Sequential Testing for Early Stopping of Online Experiments

{
    "population": 200,
    "eligible": 80,
    "positive": 20,
    "rate_all": 0.1,
    "rate_eligible": 0.25
}