في خطوة ثورية نحو تحسين سلامة المرضى، تم الكشف عن معيار مدفيل بنش (MedFailBench)، وهو معيار مفتوح المصدر تم تطويره من قبل أطباء مختصين. هذا المعيار يتميز عن باقي المعايير الطبية التقليدية التي تركز فقط على قياس مدى دقة النماذج، حيث يسعى إلى تحديد مناطق فشل الأمان ومعرفة أي منها قد تعرض للخطر.

تتضمن النسخة الحالية من مدفيل بنش (v0.2.1) 44 حالة صناعية تمت مراجعتها من قبل أطباء وتأتي مع تصنيفات للخطورة تتراوح بين 1 إلى 5، كما تقدم توضيحًا لأنواع خانات الأمان المختلفة مثل الإخفاق في تصعيد الحالات العاجلة، والخطوات غير الآمنة في صرف الأدوية عن بُعد، بالإضافة إلى تنفيذ البروتوكولات الخطيرة.

تحتوي المنصة أيضًا على لوحة بيانات حية من HuggingFace، مما يتيح للمستخدمين رؤية الأداء المباشر للنماذج على هذا المعيار. يتضمن النظام تصنيفًا للخطر الإكلينيكي وقاموسًا لتحديد خطورة الأخطاء، مما يساعد المطورين والباحثين على فهم تأثير الأنظمة الذكية المستخدمة في المجال الطبي.

من الجدير بالذكر أن مدفيل بنش تم إصداره تحت رخصتي Apache-2.0 وCC-BY-4.0، وهو يسعى إلى تقديم أداة فعالة لتحسين معايير سلامة الذكاء الاصطناعي في الطب دون استخدام بيانات المرضى أو تقديم ادعاءات غير مثبتة حول فعالية النماذج.