في عصر تتزايد فيه أهمية الذكاء الاصطناعي، أطلق باحثون معيارًا جديدًا يُعرف باسم KNOWS لتقييم أداء وكلاء الويب الذكيين. هذا المعيار يستهدف القدرة على تنفيذ مهام معقدة تتطلب الجمع بين معلومات متعددة، وتحليلها، وتنظيمها بشكل فعّال.
المساعدون الذكيون ينبغي أن يمتلكوا القدرة على استرجاع المعلومات عبر خطوات متعددة، وتجميعها في مستندات أو عروض تقديمية، وكذلك التنقل بين واجهات البرامج لإنتاج منتج نهائي متكامل. ومع ذلك، تكشف النتائج أن الأداء في هذه المهام ما زال محدودًا، حيث لا ينجح أفضل الوكلاء في 3% فقط من المهام الطويلة والمعقدة.
كل مهمة ضمن KNOWS مصممة بشكل دقيق، وتمتاز بأن كل منها يقترن بمقيّم لتقييم مدى النجاح، مما يوفر توازنًا بين الغنى والموثوقية والآلية في عملية التقييم. تكشف البيانات أن الأداء الجيد في بعض الخطوات لا يكفي، فالفشل في الخطوات البصرية يجعل النتائج غير قابلة للاستخدام، حتى لو أنجز الوكلاء أكثر من 50% من الخطوات الأخرى.
هذه النتائج تُظهر الحاجة الملحة لتحقيق تقدم أكبر في مجالات مثل فهم الأدوات، وتطوير الفهم البصري، وتعزيز التفكير على المدى الطويل. لذا، يجب أن نتساءل: ما هي الخطوات اللازمة لتحسين أداء هذه الوكلاء الذكيين في المستقبل؟
تحديات جديدة في تقييم وكلاء الويب: كيف تقيس أداء المساعدين الذكيين؟
أطلق الباحثون معياراً جديداً يسمى KNOWS لتقييم أداء وكلاء الذكاء الاصطناعي في المهام المعقدة. النتائج تكشف عن فجوات كبيرة في قدرات هذه الوكلاء، مما يستدعي تحسينات ملحوظة في الفهم البصري والتفكير طويل الأمد.
المصدر الأصلي:أركايف للذكاء
زيارة المصدر الأصلي ←جاري تحميل التفاعلات...
