في خطوة رائدة نحو تعزيز الاستخدام الفعّال للتكنولوجيا في المجال القانوني، تم إطلاق UA-Legal-Bench كمعيار جديد لتقييم نماذج اللغة الكبرى (Large Language Models) في تفسير وتمحيص القضايا القانونية الأوكرانية. على عكس المعايير الحالية التي تركز بشكل رئيسي على اللغة الإنجليزية، يقدم هذا المعيار الفرصة لاكتشاف نقاط الضعف في اللغات التي تتمتع بثراء صرفي ولغوي مختلف، مثل اللغة الأوكرانية.

يتكون UA-Legal-Bench من خمس مهام رئيسية تتعلق بتقييم الأداء القانوني، مستفيدًا من بيانات ضخمة تتجاوز 99.5 مليون قرار قضائي من السجل الموحد لقرارات المحاكم (EDRSR). المهام تشمل: تصنيف نوع القضية، تصنيف نموذج الحكم، التنبؤ بنتيجة القضية، استخراج القاعدة القانونية، وتنبؤ فئة السبب.

أقيمت التقييمات باستخدام 11 نموذجًا من نماذج اللغة (سرعة معالجة تتراوح بين 3 مليار إلى 675 مليار معلمة)، وتم إجراء 158 ألف استعلام عبر منصة AWS Bedrock. أظهرت النتائج تأثيرات متباينة على المستوى حسب المهمة؛ بينما حسن التوجيه القليل الأداء في تصنيف نموذج الحكم بنسبة تصل إلى 38.6 نقطة مئوية، كانت النتائج مختلطة في توقع النتائج.

مما يُثير الانتباه أن بعض النماذج قد سجلت أداءً عالياً في دقة مؤشرات معينة، بينما كانت النتائج العامة تظهر صورة مقلوبة. كما أكد التحليل أن النماذج بقدرة 8 مليار معلمة قادرة على المنافسة في المهام السطحية، لكن الحدود المتاحة تختلف بشكل كبير بين العائلات المختلفة.

توفر UA-Legal-Bench مجموعة من البيانات، والتوجيهات، وتنبؤات النموذج، مما يفتح المجال لتحسينات في مستقبل الذكاء الاصطناعي في المجال القانوني. تعد هذه التطورات شهادة على أهمية توسيع نطاق الذكاء الاصطناعي ليشمل مجالات وتحديات لغوية متنوعة.

ما رأيكم في هذا التطور الملحوظ في عالم القانون والذكاء الاصطناعي؟ شاركونا في التعليقات.