تسارع استخدام نماذج اللغات الكبيرة (Large Language Models) في مجال الاستشارات الطبية عبر الإنترنت، إلا أن المراجع الحالية غالباً ما تكون غير متوافقة مع الممارسات السريرية الواقعية. العديد من هذه المراجع تعتمد على محادثات مصطنعة أو محاكيات طبية، وتتجاهل الصور الطبية التي يرفعها المرضى، كما أنها تقيم استجابات السريرية باستخدام أساليب متعددة الخيارات أو مقاييس تعتمد على تداخل الكلمات، والتي لا تعكس الجودة السريرية بدقة.

اليوم، تقدم لنا مدريال إم إم (MedRealMM) معياراً مبتكراً على نطاق واسع لتقييم الاستشارات الطبية المتعددة الوسائط، تم إنشاؤه من تفاعلات حقيقية بين الأطباء والمرضى تم جمعها من مستشفى إنترنت صيني على مستوى البلاد. يستخدم مدريال إم إم إطار عمل لاستخراج نقاط التحدي السريرية المتعددة الوسائط (Multimodal Clinical Challenge Point - MCCP) لتحديد اللحظات ذات المتطلبات السريرية العالية في مسارات الاستشارة الحقيقية، ويحول كل منها إلى مهمة توليد استجابة موحدة مع الحفاظ على السياق النصي والصوري السابق.

تحتوي البيانات على 5620 حالة طبية حقيقية تغطي 64 تخصصاً، وتم تقييم 19 نموذجاً من نماذج اللغات الشاملة والمتخصصة في الطب، بما في ذلك الأنظمة القائمة على النصوص فقط. تُظهر النتائج أن المعلومات المرئية ضرورية لتحقيق أداء سريري موثوق، وأن النماذج الحالية لا تزال أدنى من استجابات الأطباء عبر الإنترنت. ورغم أن بعض النماذج تحقق عدداً أكبر أو مساوياً من المعايير السريرية الإيجابية مقارنة بالأطباء، إلا أنها تُفعل معايير سلبية أكثر، مما يشير إلى أن تجنب الأخطاء الحساسة للسلامة لا يزال يشكل عقبة رئيسية.

مدريال إم إم يقدم مرجعاً واقعياً وقابلاً للتكرار لتقييم التفكير الطبي المتعدد الوسائط في الاستشارات الطبية عبر الإنترنت. سيتوفر هذا المعيار للجمهور على موقع هاجينغ فيس (Hugging Face) عبر الرابط: [https://huggingface.co/datasets/jdh-algo/MedRealMM]. ما رأيكم في هذا التطور؟ شاركونا في التعليقات.