A/B Testing

اختبار أ/ب

التعريف

تجربة عشوائية تقارن نسختين (أ وب) بتعريضهما لمجموعتين من المستخدمين لمعرفة أيهما أفضل إحصائياً.

تُحدَّد مقاييس النجاح مسبقاً، وتُوزَّع المجموعات عشوائياً، ويُحسب حجم العينة اللازم ثم يُختبر الفرق بدلالة إحصائية. يُستخدم لتقييم نماذج جديدة على مستخدمين حقيقيين.

Definition

A/B testing is a randomised controlled experiment comparing two variants on separate user groups to determine, with statistical evidence, which performs better.

شرح مبسّط للمبتدئين

كتجربة دواءين على مجموعتين متشابهتين لمعرفة أيهما أنجع.

شرح أكاديمي متخصص

يتطلب تحليل القدرة الإحصائية، وتجنب «النظر المتكرر» الذي يضخم الإيجابيات الكاذبة.

أمثلة عملية

  • مقارنة نموذج توصية جديد بالقديم.

التطبيقات والاستخدامات

  • المنتجات الرقمية.

المزايا

  • دليل سببي حقيقي.

القيود والعيوب

  • يحتاج وقتاً ومستخدمين كافين.

تعلّم وراجع

مصطلحات مقترحة للتعلّم بعده