في خطوة جريئة نحو تحسين اختبارات التعليم، قدم الباحثون إطار العمل الجديد 'التحليل المعرفي التشخيصي' (Cognitive Diagnostic Profiling) الذي يُمكّن نماذج اللغة الكبيرة (Large Language Models) من محاكاة طلاب بأساليب متنوعة ضمن ملفات تعريف معرفية دقيقة.

تعتبر عملية المعايرة النفسية (psychometric calibration) للاختبارات التعليمية بشكل تقليدي عملية مكلفة وتتطلب بيانات استجابة بشرية، ولكن باستخدام المحاكاة الذكية، يُمكن تحقيق نتائج مبكرة ودقيقة.

يعمل إطار التحليل المعرفي التشخيصي على تحفيز نماذج اللغة الكبيرة لمحاكاة طلاب بصورة توفر تنوعًا لافتًا في الأنماط المعرفية. هذا التنوع يتيح للنماذج فهم أعمق للأسئلة والتحديات التي يواجهها الطلاب في البيئات التعليمية.

تم تقييم فعالية نموذج 'Cognitive Diagnostic Profiling' باستخدام مجموعة بيانات تتضمن 536 مُختبرًا و15 بندًا، وأظهرت النتائج تحسنًا ملحوظًا في جميع مستويات تقييم الأداء، حيث نما تداخل التوزيعات بين البيانات والشخصيات المحاكية بشكل كبير.

بهذا، يقترب نموذج المحاكاة الذكية للطلاب من التوافق النفساني مع الطلاب البشر، مما يفتح آفاقا جديدة لتطوير اختبارات أكثر كفاءة وموثوقية في المستقبل.