في عالم أتمتة علم البيانات، تبرز DS-Lighting كأداة رئيسية لإحداث تغيير حقيقي في الطريقة التي يتم بها إدارة سير العمل. تعتمد نماذج اللغات الضخمة (Large Language Models) على هذه الأداة لجعل تصميم مهام علم البيانات أكثر وضوحًا، مما يزيد من إمكانية تكرار النتائج ويسهل مقارنتها عبر مهمات متعددة.

تعمل DS-Lighting على تقسيم عملية التصميم إلى أربع طبقات قابلة للاستخدام المتكرر، وهي: البيانات، سير العمل، التنفيذ، والتقييم. هذا التفكيك يتيح إمكانية تمثيل مجموعة متنوعة من الوكلاء كبرامج مشغلة، تدعم كل من خطوط الأنابيب المحددة مسبقًا والبحث التكيفي.

كما تم دمج معايير علم البيانات مفتوحة المصدر في تنسيق مهام جديد يُعرف باسم MLE-Bench، مما يسهل المقارنات المنضطة تحت واجهة مهام مشتركة. بالإضافة إلى ذلك، تُظهر التجارب التي أُجريت على الوكلاء، والأدوات، والنماذج، أن التصميم الواضح للأدوات يساهم في تحسين القابلية للتكرار، والمقارنة، والموثوقية، مع الحد من الفشل النظامي غير الضروري في سير عمل علم البيانات.

يمكنكم الاطلاع على الكود المصدري المتاح على هنا واستكشاف هذه الأداة المبتكرة!