في عالم الذكاء الاصطناعي الذي يعتمد بشكل متزايد على نماذج اللغة الكبرى (Large Language Models)، يبدو أن مسألة توقع الأخطاء باتت أكثر تعقيدًا. كيف يمكننا معرفة ما إذا كانت مخرجات النموذج صحيحة أم لا؟ هذا ما سنتناوله اليوم.

تعد مشكلة توقع الأخطاء واحدة من التحديات الرئيسية التي تواجه الباحثين والمطورين، وتُعنى بتحديد ما إذا كان الناتج من نموذج معين صحيحًا أم لا. وللتغلب على هذا التحدي، يستخدم العديد من المتخصصين قياسات عدم اليقين (Uncertainty Quantification) التي تعكس مدى قدرة النموذج على تقديم توقعات دقيقة.

ولكن، ماذا عن الغموض الذي قد يتواجد في بيانات المدخلات نفسها؟ بحث جديد يقدم لنا طريقة جديدة لفصل الغموض عن قياسات عدم اليقين، مما يزيد من فعالية توقعات الأخطاء.

أجريت التجارب على مهمة تقديم الإجابات على الأسئلة (Question Answering) باستخدام ستة قياسات لعدم اليقين، فوجد الباحثون أن هذه القياسات تكون أكثر دقة في التنبؤ بالأخطاء عندما تكون الحالات غير غامضة مقارنة بالأسئلة التي تحمل إجابات متعددة محتملة.

استخدم الباحثون تقنيات متقدمة مثل خبراء محكمين (Gated Experts) والتوقع الانتقائي (Selective Prediction) لدمج معلومات الغموض في بيانات التدريب وتوقع الأخطاء. وبفضل هذه الآلية، حققوا تحسنًا بمعدل يفوق 10 نقاط في دقة النتائج (PRR) عبر مجموعات مختلفة من البيانات، بما في ذلك تلك المعتبرة غير غامضة.

لذا، من الواضح أن الغموض في المدخلات قد يحمل فرصًا كبيرة لتحسين أداء نماذج الذكاء الاصطناعي. كيف يمكننا الاستفادة من هذه الأفكار في مشاريعنا المستقبلية؟