مصطلح من المسرد
مقياس برير (Brier Score) Brier Score
مقياس دقة للتنبؤات الاحتمالية — متوسط مربع الفرق بين الاحتمال المتوقَّع والنتيجة الفعلية. كلما انخفضت القيمة كان ذلك أفضل؛ المثالي = 0، والأسوأ = 1. تقيّم Closelook كل توقّع في Predictions باستخدام Brier إلى جانب log-loss بحيث تكافئ لوحة النتائج العامة المعايرة الجيدة لا الخطأ الواثق.
تُرجم آليًا من النص الأصلي بالإنجليزية. اقرأ النص الأصلي بالإنجليزية →
التعريف والسياق
يقيّم مقياس Brier التنبؤات الاحتمالية: بالنسبة لكل حدث ثنائي تتنبأ فيه باحتمال p، وبعد أن تُحسم النتيجة (0 أو 1)، يكون الخطأ هو (p − النتيجة)2. ويعطي حساب المتوسط عبر جميع التنبؤات درجة Brier تتراوح بين 0 (معايرة مثالية) و1 (خطأ تام). وعلى عكس الدقة العادية، يعاقب Brier كلاً من الثقة الزائدة والثقة الناقصة — فالتنبؤ بنسبة 90% ثم الخطأ يضر أكثر من تنبؤ بنسبة 60% لا يتحقق.
يمكن تفكيك Brier إلى الموثوقية (هل تصح تنبؤاتك بنسبة 70% في 70% من الحالات؟) والتمييز (هل تفرّق بين النتائج المحتملة وغير المحتملة؟). ومع log-loss — الذي يعاقب الخطأ الواثق بشكل أكثر صرامة — يُعد المعيار المعتمد في مسابقات التنبؤ، من Metaculus إلى خدمات الأرصاد الجوية. غالبًا ما لا تكون التنبؤات التي تبدو ذكية لكنها تسجّل Brier > 0.25 أفضل من رمي عملة.
لماذا يهم المستثمرين
الاستثمار في جوهره تنبؤ متخفٍّ: فكل صفقة هي رهان احتمالي ضمني. ومعظم المستثمرين لا يسجّلون نتائجهم أبدًا لأن الرأي أكثر راحة من المعايرة. تأسس موقع Predictions الفرعي التابع لـ Closelook لعكس هذه العادة — إذ يحمل كل توقّع احتمالاً صريحًا وأفقًا زمنيًا ومستوى إبطال، وتُرتَّب لوحة النتائج العامة وفق Brier + log-loss. وغالبًا ما يتفوق متنبئ متواضع الدقة لكنه دقيق المعايرة على متنبئ صاخب متذبذب الدقة.
مفاهيم ذات صلة
يرتبط Brier بمفهوم ألفا (Alpha) (فالتفوق المعدَّل حسب المخاطر هو النظير المالي للتنبؤ المعاير)، وبإطار الألفا الاتجاهي (Directional Alpha) الذي تقوم عليه مكتبة الأنماط لدى Closelook.