في ظل تزايد اعتماد الشركات على الوكلاء المحادثيين (Conversational Agents) لتحسين تجربة العملاء، أصبح تقييم فعالية هذه الأنظمة أمرًا بالغ الأهمية. لكن تقييم الوكلاء المحادثيين يتطلب أكثر من مجرد القياسات التقليدية المعتمدة على التداخل اللفظي؛ فهو يتطلب أدوات متقدمة تقيم توافق النوايا، والصدق، والمساعدة، والوضوح، والنغمة وجودة الاستجابة بشكل عام.

تقديم الابتكار الأخير في هذا المجال جاء عبر نظام GenAI Evaluation، الذي يعد حلاً مبتكرًا وقائمًا على الحوكمة (Governance) لتقييم الوكلاء المحادثيين في التجارة. يعمل هذا النظام على معالجة سجلات المحادثات بشكل مركزي وفعّال، مع التركيز على الجوانب التالية:
1. **المساعدة** – هل كانت الإجابات مفيدة ومناسبة للسياق؟
2. **الصدق** – هل تعكس المعلومات المقدمة الحقائق بشكل دقيق؟
3. **الوضوح** – كيف يمكن فهم الإجابات بشكل أفضل؟
4. **توافق النغمة** – هل تتناسب اللغة المستخدمة مع طبيعة التفاعل؟
5. **جوانب محددة للترجمة** – مما يسهل تفاعل العملاء بلغةهم المفضلة.

يتميز GenAI Evaluation بقدرته على معالجة نحو 50,000 سجل يوميًا، ويتيح لجودة الجودة والتقييم الدقيق للعملاء. وتم استخدام 12,980 سجلًا تم تصنيفها عشوائيًا من قبل أربعة مُقيّمين مدربين لضمان دقة عالية. استنادًا إلى هذا التقييم، حقق النظام مستوى دقة مذهلاً بنسبة 89% للقبول البشري في جانب الترجمة.

هذا الابتكار لا يقتصر فقط على ضمان جودة الخدمة، بل يعزز أيضًا من قدرة الأعمال على تتبع وتحليل فعالية وكلائها المحادثيين على مر الزمن، مما يسهل عمليات الرقابة والتدقيق في الأداء.