مع التحديات الكبيرة التي يواجهها نماذج اللغات الضخمة الحالية في مجالات متخصصة مثل الطيور، يظهر مشروع MAviS كحل مبتكر يتطلع إلى تحسين الفهم البيئي والحفاظ على الحياة البرية. قدم الباحثون في هذا المجال MAviS-Dataset، وهي مجموع بيانات تضم معلومات متعددة الأنماط حول أكثر من 1000 نوع من الطيور، تشمل التفاصيل النصية والصوتية والصور.

لكن ما يجعل MAviS مميزًا حقًا هو MAviS-Chat، مساعد محادثة متعدد الأنماط (Multimodal Conversational Assistant) الذي يجمع بين النص والصوت والرؤية لتقديم إجابات دقيقة والسماح بنوع معين من الفهم، مما يعزز من قدرة هذه الأنظمة على التعامل مع الأسئلة المعقدة المتعلقة بالأنواع.

للتقييم الكمي، تطلق MAviS-Bench، وهو معيار جديد يضم أكثر من 25,000 زوج من الأسئلة والإجابات المصممة لتقييم قدرات الإدراك والتفكير الخاصة بالطيور عبر الأنماط المختلفة. النتائج التجريبية تشير إلى أن MAviS-Chat يتفوق على النماذج السابقة، مما يدل على فعالية قاعدة البيانات الخاصة بنا المُعززة بالمعلومات المُنظمة.

إن النتائج تجسد الحاجة الملحة لنماذج لغوية متعددة الأنماط تتكيف مع تطبيقات بيئية، مما يزيد من أهمية هذا المشروع في حماية التنوع البيولوجي.