أجرت دراسة مبتكرة ثلاث تجارب مصنفة لمراجعة هذا التحيز الجغرافي، حيث قامت بتحليل 4320 استدعاء للواجهة البرمجية (API) عبر أربع نماذج لغوية مختلفة وخمسة مجالات مهنية. النتائج كانت مثيرة للاهتمام!
نتائج قوية">نتائج قوية
- **التباين في سمعة المؤسسات**:
أظهرت دراسة أولى تأثيرًا ملحوظًا لسمعة المؤسسة على التقييم، حيث سجلت الفرق +0.297 نقطة على مقياس من 10 نقاط، مما يعطي مؤشرات قوية على التمييز المحتمل.
- **تفكيك عوامل التحيز**:
في الدراسة الثانية، تم تحليل تأثير السمعة الجغرافية وسمعة المؤسسات، حيث تجاوز نفوذ سمعة المؤسسة (+0.185) تأثير البلد (+0.126) بمقدار 1.5 مرة.
- **النشر في المجلات المرموقة**:
أبرزت الدراسة الثالثة تأثير نشر المقالات في المجلات ذات السمعة الرفيعة مثل Nature، الذي يتفوق بمقدار 5.7 مرة على سمعة المؤسسات. مما يعني أن التقييمات قد تُحسن بشكل أكبر للمرشحين من المؤسسات ذات السمعة المتدنية إذا تم نشر أعمالهم في مجلات معروفة.
الخلاصة
تم استخدام مؤشر التحيز النيترولوجي (NBI) لقياس النتائج، حيث أظهرت الدراسة تفوقًا في عدم الاتساق في التقييمات للمسارات التعليمية ذات السمعة المنخفضة، وهذا يمثل عيبًا معرفيًا لا تلتقطه المقاييس التقليدية.
هل تعتقد أن هذه النتائج قد تؤثر على كيفية تقييم أنظمة الذكاء الاصطناعي للمتقدمين في المستقبل؟ شاركونا آرائكم في التعليقات!