في عالم البرمجة والذكاء الاصطناعي، قدم فريق من الباحثين فكرة مبتكرة تسمى فورمولا كود (FormulaCode)، وهي منصة جديدة تهدف إلى تقييم فعالية وكالات البرمجة المبنية على نماذج اللغات الضخمة (LLMs) بطريقة أكثر شمولية ودقة. تأسست هذه المنصة استجابةً للاحتياجات المتزايدة في تقييم أداء هذه الوكالات على مستوى المستودعات الكاملة، وذلك باستخدام معايير أداء متعددة الأهداف.

تستند فورمولا كود إلى مجموعة بيانات مكونة من 957 نقطة اختناق أداء مستخرجة من مكتبات برمجية علمية على منصة GitHub. هذه النقاط المرتبطة تأتي مع ترقيات موثوقة كتبت بواسطة خبراء، حيث تتضمن في المتوسط 264.6 عبء عمل للأداء يتم صيانته من قبل المجتمع لكل مهمة. هذا التركيب الفريد للبيانات يمكن نموذج الذكاء الاصطناعي من تحسين الشيفرات المصدرية ضمن ظروف دقيقة أدت إلى تحديات لا تزال قائمة لأفضل وكالات البرمجة.

تظهر نتائج التقييم أن تحسين الشيفرات على مستوى المستودعات بتعدد أهداف الأداء لا يزال يمثل تحديًا كبيرًا. لذا، تعتبر فورمولا كود خطوة هامة نحو تحسين فعالية وكالات الذكاء الاصطناعي في العمل مع الكود المعقد في البيئات الحقيقية، وهي تعيد تشكيل كيفية تقييم وتقوية هذه الأدوات للمستقبل.

هل أنتم مستعدون للمغامرة في عالم البرمجة المدعوم بالذكاء الاصطناعي؟ شاركونا آراءكم في التعليقات!