في خضم التطورات السريعة التي يشهدها مجال الذكاء الاصطناعي، تجري الأبحاث على استخدام نموذج تفعيل فريد من نوعه لتحسين تجربة التعلم. تمثل الدراسة الجديدة التي أجريت على نماذج اللغات الكبيرة (Large Language Models) خطوة مثيرة لفهم تأثير تركيبات الشخصية المدعومة بالتفعيل على توليد وإجابة الأسئلة القصيرة.
تناولت الدراسة تأثير ``شخصيات التوجيه''، التي تعكس سبعة سمات شخصية، في عمليات توليد الإجابات والتقييم الآلي على مجموعة بيانات ASAP-SAS. وقد شملت التجارب ثلاثة نماذج لغوية مختلفة تتضمن بنى كثيفة ومزيج من الخبراء.
أظهرت النتائج أن توجيه الشخصية يؤثر سلبًا على جودة الإجابات. كان لهذا التأثير ثقل أكبر على مهام اللغة الإنجليزية المفتوحة (English Language Arts - ELA) مقارنةً بالمشكلات العلمية الحقائق. وبالأخص، كانت المهام التفسيرية والحجج أكثر حساسية، حيث لوحظ تدهور يصل إلى 11 مرة.
أما فيما يتعلق بعمليات التقييم، فقد كشفت الدراسة عن انزلاقات في معايير تقييم العلامات. على سبيل المثال، يميل المصححون الذين يمثلون سمات ``شريرة'' و``غير مهذبة'' إلى منح درجات أكثر قسوة، بينما يميل الآخرون الذين يعكسون سمات ``طيبة'' و``متفائلة'' إلى إعطاء درجات أكثر تساهلاً.
وجد أن مهام ELA كانت أكثر عرضة للتأثير من الشخصية الشخصية بمعدل يصل إلى 2.5-3 مرات مقارنة بالمهام العلمية. ولاحظ الباحثون أيضًا أن نموذج مزيج الخبراء يظهر انزلاقات في التقييم تصل إلى حوالي 6 مرات أكبر من النماذج الكثيفة.
هذه الدراسة تعد الأولى التي تسلط الضوء بشكل منهجي على تأثير سمات الشخصية المدعومة بالتفعيل في مجالات التعليم، مما يبرز الحاجة إلى معايرة دقيقة وفهم أفضل لهذه الخلفيات عند تطبيق النماذج الشخصية في بيئات التعلم.
تأثير توجيه التفعيل على توليد الإجابات القصيرة: دراسة مثيرة في الذكاء الاصطناعي
تستعرض هذه الدراسة تأثير توجيه التفعيل في نماذج اللغة الكبيرة على جودة الإجابات القصيرة والتقييم الآلي. النتائج تشير إلى أن تأثيرات التوجيه قد تؤدي إلى تدهور ملحوظ في جودة الإجابات، خاصة في مهام اللغة الإنجليزية.
المصدر الأصلي:أركايف للذكاء
زيارة المصدر الأصلي ←جاري تحميل التفاعلات...
