إعادة النظر في جنون مارس: نموذج الذكاء الاصطناعي كان ناجحًا لكن الأمور المجنونة لا تزال تحدث

(ملحوظة: هذه المقالة جزء من سلسلة مستمرة لتوثيق تجربة باستخدام الذكاء الاصطناعي لملء أقواس NCAA و انظر كيف تسير الأمور مقابل سنوات من الخبرة الإنسانية. المقال الأصلي هو كما يلي.)

قبل أسبوع، كتبت عن الانضمام إلى بطولة NCAA من خلال عملية أكثر انضباطًا مما أستخدمه عادةً.

بدلاً من الاعتماد على التميمة، أو المشاعر، أو أي فريق يبدو رائعًا بعد ظهر يوم السبت، حاولت التفكير في الشريحة بالطريقة التي يتبعها المستثمر أو المحلل: فصل التنبؤ الأولي عن القيمة المتوقعة، وبناء شريحة واحدة حول أعلى احتمال للنجاح، وبناء شريحة أخرى حول ديناميكيات التجمع، واتخاذ القرارات مع بعض الوعي على الأقل بعدم اليقين.

أنتجت هذه العملية قوسين. إحداهما كانت الفئة “الأكثر ترجيحًا”، والتي تم تصميمها لتعظيم احتمالات تحقيق نتيجة قوية إذا اتبعت البطولة مسارًا عقلانيًا في الغالب. أما الآخر فكان عبارة عن شريحة EV لمجموعة مكونة من 70 إدخالًا تقريبًا – وليس هدفًا متناقضًا للغاية، ولكنه شيء مصمم للفوز في مسابقة حقيقية بدلاً من مجرد الظهور بمظهر معقول.

فكيف تم ذلك؟

جيد جدًا، في الواقع. فقط ليس تماما.

لقد حصل النموذج على 13 فريقًا من أصل 16 فريقًا بشكل صحيح، وهو أمر قوي بشكل موضوعي في بطولة مصممة لمعاقبة الثقة ومكافأة الفوضى. صمدت البنية العامة للتنبؤات. حددت معظم الأوزان الثقيلة الحقيقية. لقد كان الأمر صحيحًا بشكل مباشر بشأن الفرق التي من المرجح أن تنجو من عطلة نهاية الأسبوع الأولى. ومن المفهوم عموما أن شكل الميدان.

ولكن كما يفعل شهر مارس/آذار، فقد وجد أيضًا نقاط ضعف.

وكانت الأخطاء الأكثر وضوحًا هي ولاية أوهايو وويسكونسن وفلوريدا. خسرت ولاية أوهايو مباراة 66-64 أمام TCU في رمية الكرة في وقت متأخر. سقطت ولاية ويسكونسن 83-82 إلى رقم 12 هاي بوينت. فلوريدا، المدافع عن اللقب الوطني والمصنفة الأولى، خسرت 73-72 أمام أيوا بمؤشر ثلاثي في ​​الثواني الأخيرة. ولم تكن تلك الانهيارات بطيئة وواضحة. لقد كانت خسارة حيازة واحدة، تم تحديدها في اللحظات الأخيرة، وهو بالضبط نوع النتائج التي تذكرك بأنه لا يمكن لأي نموذج بطولة أن يعمل في المختبر.

وهذا يترك تفسيرين محتملين.

الأول هو أن النموذج كان خاطئًا.

والآخر هو أن النموذج كان صحيحًا في الغالب، لكن كرة السلة ذات الإقصاء الفردي تمثل بيئة رهيبة لليقين.

الجواب كالعادة هو كلاهما.

والخبر السار هو أن الحصول على 13 فريقًا من أصل 16 فريقًا من Sweet 16 بشكل صحيح يشير إلى أن الإطار الأساسي كان مفيدًا. لم يكن الأمر عشوائيا. لم تكن زخرفية. لم يكن الأمر مجرد استخدام كلمات أكثر روعة للوصول إلى نفس التخمينات البديهية التي يقوم بها أي شخص آخر. وعلى مستوى تحديد الجودة، نجح الأمر.

الخبر الأقل طمأنينة هو أن الأخطاء كانت مفيدة أيضًا.

إذا نظرنا إلى الوراء، نجد أن العملية لا تزال تميل بشكل كبير جدًا نحو “الفريق الأفضل يتقدم عادةً”. وهذا غالبا ما يكون صحيحا على مدى موسم واحد. هذا أقل صحة على مدار 40 دقيقة في صالة ألعاب رياضية محايدة، خاصة عندما يمكن أن يخلق المستضعف تقلبات. خسارة ولاية ويسكونسن هي أوضح مثال. لم يكن النموذج الأقوى المضطرب قد اختار بالضرورة هاي بوينت للفوز، لكنه ربما كان سيعامل ولاية ويسكونسن على أنها أكثر هشاشة مما فعلت: أكثر عرضة لنوع اللعبة حيث يصبح المستضعف ساخنًا من ثلاثة، ويمتد المرشح المفضل، ويحول آخر دقيقتين إلى رمي عملة معدنية.

تقول خسارة فلوريدا شيئًا مشابهًا على مستوى أعلى. ليس من المفترض أبدًا أن يكون المصنف رقم 1 “من المرجح” أن يخسر مبكرًا، ولكن هناك فرق بين أن تكون قويًا وأن تكون منيعًا. كان النموذج على حق في احترام فلوريدا. ربما كان من الخطأ التعامل مع فلوريدا على أنها منطقة آمنة.

هذا التمييز مهم إذا كنت تحاول الفوز بلعبة البلياردو بدلاً من مجرد الدفاع عن كرامتك.

هذا هو المكان الذي يصبح فيه التمرين مثيرًا للاهتمام. في الأسواق، وفي الاستثمار، وفي مجموعات الشرائح، هناك فرق كبير بين أن تكون صحيحًا على نطاق واسع وأن تكون في وضع صحيح. يمكن أن تكون التوقعات ذكية ولكنها لا تزال تفشل في تحديد المكان الذي تعيش فيه الهشاشة الحقيقية. لا تمنح البطولة نقاط أسلوب للحصول على أفضل إطار عمل إذا كنت لا تزال تقلل من احتمالية أن يبدأ أحد المستضعفين في التسديد.

إذن ما الذي سأغيره؟

ليست الفكرة الأساسية. ما زلت أعتقد أن الطريقة الصحيحة للتعامل مع الشريحة هي فصل التنبؤ ذو الاحتمالية الأعلى عن استراتيجية القيمة المتوقعة. معظم الناس يمزجون تلك الأشياء دون أن يدركوا ذلك. إنهم يختارون بطلاً يعتقدون أنه قادر على الفوز، ولكن بعد ذلك يقومون ببعض الاختيارات التعسفية المزعجة “لإضفاء الإثارة على الأمور”، وهي في الحقيقة مجرد طريقة أخرى للاعتراف بعدم وجود عملية متماسكة لديهم.

ما أود تحسينه هو طبقة التقلب.

إن النسخة الأفضل من هذا النهج ستولي مزيدًا من الاهتمام للمفضلات القوية حقًا والتي تبدو قوية فقط في جدول البيانات. ومن شأنه أن يقيس بشكل أكثر وضوحًا تباين النقاط الثلاث، ومخاطر الدوران، والمشاكل الخاطئة، والاعتماد على هداف واحد، وعدد المرات التي تتأرجح فيها نتائج الفريق بشكل كبير من مباراة إلى أخرى. ستظل تحترم البذور العليا. سيكون مجرد المزيد من الشك منهم.

وهذا مهم أكثر الآن، لأن الأقواس الأصلية مغلقة بالطبع.

في هذه المرحلة، لا يمكن لأحد أن يدعي أنه “كان من الممكن أن يحصل على ولاية أيوا” ما لم يكن لديه ولاية أيوا بالفعل. وهذا جزء من جمال وقسوة المشروع بأكمله. بمجرد أن تبدأ الألعاب، يصبح إطارك الرائع وثيقة تاريخية.

لكن هذا لا يعني أن العملية لم تعد مفيدة.

لسبب واحد، قد يكون هناك تجمعات الفرصة الثانية. يتم إعادة تعيين العديد من المسابقات في Sweet 16 أو Final Four، وهي حقًا هدية لأي شخص يحب العملية. تجمع الفرصة الثانية يزيل مسرح التظاهر بأننا نعرف كل شيء مقدمًا. الآن لدينا معلومات جديدة، ومجال أصغر، وفرصة جديدة لفصل الفرق القوية حقًا عن الفرق الباقية فقط.

والأهم من ذلك، أن هذا التمرين لا يزال يقدم الدرس الرئيسي الذي كنت أتمنى استكشافه في هذه السلسلة: التنبؤ المنضبط لا يتعلق بالقضاء على عدم اليقين. يتعلق الأمر بجعل عدم اليقين واضحًا.

النموذج قام بعمل جيد. لا يزال لدى مارس أفكار أخرى.

هذا ليس فشلا. هذه هي النقطة.

وإذا كانت هناك فرصة ثانية، فسأعود إليها على الفور – أكبر سنًا وأكثر حكمة وأقل استعدادًا للثقة في شخص مفضل ضعيف لمجرد أن بذوره تقول إنه ينبغي عليّ ذلك.