في عصر بدأت فيه التكنولوجيا تتقدم بشكل ملحوظ في تقديم الدعم الطبي، تم الإعلان عن معيار MedCTA، خطوة جديدة تُمكننا من تقييم أداء وكلاء الأدوات الطبية المدعومة بالذكاء الاصطناعي. هذا المعيار لا يقتصر فقط على تقييم القدرة على التعرف، بل يتجاوز ذلك ليشمل استرجاع الأدوات واكتساب الأدلة ودمجها بشكل فعّال.

في الوقت الذي كانت فيه المعايير السابقة تركز على تقييم إدراك المعطيات أو الإجابة عن تساؤلات واحدة، جاءت MedCTA لتسد هذه الفجوة، من خلال طرح 107 مهمة سريرية حقيقية تم التحقق منها من قبل أطباء، مع مسارات تنفيذ قابلة للتحقق عبر خمسة أدوات طبية مستخدَمة. يعتمد هذا المعيار على مدخلات متعددة الوسائط مثل الصور الشعاعية، شرائح علم الأمراض، والتقارير، مما يجعله أداة شاملة لفهم كيفية استخدام أدوات الذكاء الاصطناعي في الطب.

أجرينا اختبارات على 18 نموذجًا مفتوح المصدر ومغلق المصدر، ووجدنا أن الأنظمة المتقدمة لا تزال تواجه صعوبات في الاستخدام متعدد الخطوات للأدوات الطبية. التحديات تشمل الفشل في الالتزام بالبروتوكولات، التوقف المبكر، وسوء اختيار الأدوات. يُظهر ذلك أن التقييم المعتمد على إدراك قوي لا يعني بالضرورة سلوكًا موثوقًا في السياقات السريرية.

معايير MedCTA تُعد بمثابة منصة اختبار صارمة لتدقيق وتشخيص وتعزيز الوكلاء الطبيين الموثوقين. للتعمق أكثر في التفاصيل، يمكن زيارة الموقع الخاص بالمعيار على الإنترنت.