في عالم سريع التغير، حيث تتزايد أهمية البيانات السريعة والدقيقة، تظهر تحديات متعددة في مجال الطاقة تتطلب استراتيجيات تحليل متطورة وفعالة. تركزت الدراسات السابقة على استرجاع المعلومات الساكنة، لكن الآن، تكشف دراسة جديدة عن قوة العملاء المدعومين بالأدوات، والتي تستفيد من تقنيات النماذج اللغوية الكبيرة (LLM) لتقديم أداء مميز في السيناريوهات الواقعية.

تتناول الدراسة الوضع الحالي لتقييم أداء العملاء في مجالات متعددة مثل المالية، البرمجة، القانون، واكتشاف الأدوية، مشيرة إلى أن تقييمات مجال الطاقة لا تزال محدودة بتكرار المعرفة الثابتة. ومع ذلك، يتطلب هذا القطاع نشاطات مثل استرجاع البيانات الحية، وفهم اللوائح والمعرفة السوقية الخاصة، والتي تمثل فجوة كبيرة في الأبحاث الحالية.

تمت دراسة أداء العملاء المدعومين بالأدوات في تحليل بيانات سوق الطاقة الحقيقي من خلال مجموعة من 243 مشكلة تم إعدادها بواسطة خبراء، مقسمة إلى ثلاث فئات: (1) استرجاع وتحليل بيانات السوق، (2) استرجاع المعرفة وتفسيرها، و(3) النمذجة الكمية المتقدمة وتحليل القرارات. تشمل المهام التحليل السعري وتحليل الطلب، ونمذجة تأثير التعريفات، وتقدير عائدات الأصول، وتحليل استراتيجيات التحوط، والنمذجة المثلى، مع تغطية مشاكل تتراوح بين مستويات صعوبة مختلفة.

تم تزويد العملاء بمجموعة قابلة للتعديل من الأدوات المتخصصة، بما في ذلك واجهات برمجة التطبيقات الخاصة بأسواق الكهرباء الحية، وبحث القضايا التنظيمية، وقواعد بيانات التعريفات، ونماذج تحسين الأصول، بالإضافة إلى الجيل المدعوم بالاسترجاع عبر مستندات سوق الطاقة.

قيم الباحثون استجابات العملاء باستخدام بروتوكول تقييم متعدد الأبعاد يقيس دقة النهج، ووضوح الإجابات، وتوافق الخصائص، وصحة المصادر، مع توجيه الواجبات بناءً على نوع السؤال. قدمت الدراسة تحليلاً مقارناً لقدرات كل من النماذج المغلقة المصدر والمفتوحة المصدر، مما يقدم لمحة عن كيفية تفاعل قدرة النموذج مع الأدوات المخصصة في هذا القطاع المهم. كما تم إصدار بعض المواد الأساسية للجمهور لدعم إمكانية التكرار والبحث المستقبلي.