تشهد منطقة جنوب شرق آسيا (SEA) تطورًا متسارعًا في تقنيات الذكاء الاصطناعي، لكن حتى الآن، لا تزال قدرات الوكلاء في اللغات الإقليمية غير مفهومة بشكل جيد. للتغلب على هذه الفجوة، تم تقديم **SEATauBench**، وهو أول إطار تقييم مخصص للذكاء الاصطناعي السيادي في تلك المنطقة.

يستند **SEATauBench** إلى **TauBench**، ويكيفه لخدمة خمس لغات: **الماندرين**، **الفيتنامية**، **التايلندية**، **الإندونيسية**، و**الفلبينية**. يُجري الإطار تقييمات للوكلاء عبر إعدادات محلية تتنوع فيها لغة التفاعل بين المستخدم والوكيل، فضلاً عن مواصفات الأدوات والمجالات المهمة.

أظهرت التجارب على ثلاثة نماذج حديثة أن قدرات الوكلاء المشغلة بالإنجليزية تنقل بشكل معقول عند تغيير لغة المحادثة فقط، ولكن الجودة والموثوقية تتدهور بشدة مع مزيد من التكيف السياقي، حيث لوحظت أكبر الخسائر في التكيف الكامل مع المجالات.

هذا يدل على حد الممارسات الحالية التي تعتمد فقط على تقييمات في الإنجليزية لقياس قدرات الوكلاء في لغات جنوب شرق آسيا، مما يوفر فرصة حقيقية لتطوير منظومات ذكاء اصطناعي متعددة اللغات تتناسب مع التنوع اللغوي للمنطقة.

وبالإضافة إلى ذلك، يقدم **SeaTau** معيارًا تشخيصيًا وخط أنابيب قابل لإعادة الاستخدام لبناء وكلاء متعددين لغويًا يمكن الاعتماد عليهم. يمكن الوصول إلى البيانات والشيفرة المصدرية على [github.com/SEACrowd/SEATauBench].

ما رأيكم في هذا التطور؟ شاركونا في التعليقات!