في السنوات الأخيرة، شهدنا تقدمًا ملحوظًا في توجيه نماذج اللغة الكبرى (Large Language Models) نحو قيم مستهدفة. ولكن، كيف يمكن أن يحدث أن تظل هذه النماذج تعاني من عدم المنطقية حتى بعد خضوعها لعمليات تحسين متقدمة؟
في دراسة جديدة نُشرت على arXiv، ذهب الباحثون إلى أن نماذج اللغة الكبرى المستهدفة قد تفشل في تحقيق أقصى استفادة من المحاكاة المنطقية حتى مع تحقيق اتصال عميق مع قيم معينة. هذه الفجوة باتت تُعرف باسم "خطر القيمة العقلانية"، وتتمثل في عدم توافق الفائدة بين استراتيجية التفكير المستخدمة في النموذج والاستراتيجية المنطقية التي تحاول زيادة الفائدة بأقصى حد ممكن.
يتمثل جانب آخر من هذه الدراسة في تفكيك خطأ تقدير خطر القيمة العقلانية إلى ثلاثة مكونات: المطالبات المحدودة، الاستجابات المقيدة، والمدققين غير المثاليين.
الأبحاث شملت مختبرات وأدوات تتبع الأداء مثل Llama-3.1 وQwen-2.5 وGPT-5.2 وGPT-5.5، بالإضافة إلى أدوات تقييم مثل UltraFeedback وAlpacaEval وGSM8K. وأظهرت النتائج أن:
1. خطر القيمة العقلانية منتشر بشكل واسع.
2. يمكن لتوافق القيم أن يقلل من هذه المخاطر لكنه لا يمكن أن يتجنبها.
3. التحسين الذاتي يمكن أن يزيد من المنطقية.
4. سلسلة التفكير الأطول تحسن المنطقية ولكن مع عوائد متناقصة.
يمكنكم الاطلاع على الكود المستخدم في هذه التجارب من خلال زيارة رابط دراسة GitHub. هل لديكم آراء أو تجارب مشابهة؟ شاركونا في التعليقات!
هل تعاني نماذج اللغة الكبرى (LLMs) من عدم المنطقية في التفكير؟ اكتشافات مثيرة من الأبحاث الحديثة!
تشير الأبحاث الجديدة إلى وجود فجوة بين القيمة المنطقية ونماذج اللغة الكبرى (LLMs) حتى بعد تحسين الارتباط بالقيم المستهدفة. نتائج التجارب توضح أن عدم المنطقية قد يؤثر على استراتيجيات الاستدلال بشكل كبير.
المصدر الأصلي:أركايف للذكاء
زيارة المصدر الأصلي ←جاري تحميل التفاعلات...
