في تطور لافت في مجال الذكاء الاصطناعي، تم تقديم 'بنشي' (Benchy) كوسيلة مبتكرة لتوحيد المقاييس المستخدمة في تقييم البرامج الذكية. تعتمد 'بنشي' على منظور جديد لمعايير الذكاء الاصطناعي، حيث يمثل كل معيار مجموعة مكونة من برنامج معين، دالة تقييم، ومجموعة بيانات، تعرف بالرمز B=(P,S,D).

ما يميز 'بنشي' هو الطريقة التي تتعامل بها مع المعايير في بيئات التنفيذ. يتم تأليف المعايير بلغة YAML المعتمدة، حيث يضمن كل مفهوم دلالي استخدام بنية واحدة صحيحة. لكن هذه السمة لا تعني بالضرورة أن التعريفات الصحيحة فقط هي التي سيتم إصلاحها، بل تقدم 'بنشي' مرحلة تجميع تحول المعاني دون أن تغير أي دلالة.

تستخدم البرامج تخطيطات محددة للإدخال والإخراج، حيث تعمل حقول الإخراج النهائية كمعايير للتقييم. ومن خلال واحدة من العقود الزمنية العالمية الشاملة، تسمح 'بنشي' بتكييف الأنظمة الخارجية على الحدود الخاصة بها، مما يضمن ألا تؤثر آليات التكامل في دلالات المعايير.

هذه الورقة البحثية تفصل النموذج الدلالي، والمخطط والبرنامج القائم على المهام، بالإضافة إلى قواعد التحقق من صحة البرامج. تقدم أيضًا معلومات حول بناء العمارة التنفيذية ونطاق اللغة الحالية، والتي تعد بالتأكيد منصة استراتيجية لتقييم التطورات المستقبلية في الذكاء الاصطناعي.