في ظل تطور مجالات الهندسة، يتطلب الاستجابة لمتطلبات الهندسة الإنشائية أكثر من مجرد إجابة وحيدة، بل سلسلة من الأنشطة والترتيبات المتشابكة تشمل متطلبات مفهومة، ونموذج قابل للحساب، وسجلات التحقق، وإخراجات الحلول، وسجلات فحص التعليمات البرمجية، وأخيرًا تقرير شامل. في هذا السياق، قدم الباحثون نظامًا جديدًا يدعى StructureClaw، والذي يعتبر ورشة عمل مركزة على العناصر تمكن وكالات نماذج اللغات الكبيرة (LLM) من العمل من خلال مهارات هندسية مدارة وأدوات محددة وحالة عنصر مشترك وبيانات تحليل محلية.

كما قدموا أيضًا الاختبار الجديد StructureClaw-Bench، الذي يتضمن 150 سيناريوًًا منضبطًا يغطي تنفيذ سير العمل القياسي والثبات التفاعلي وإعادة إنشاء نماذج هيكلية متعددة الوسائط. نجاح أي سيناريو يعتمد فقط على اجتياز جميع التأكيدات المطلوبة على مستوى العنصر والتنفيذ في جولة واحدة. عبر عشر تكوينات لوكالة النماذج، تم تقييم كل منها على نفس الـ 50 حالة معيارية، ارتفعت نسبة النجاح من 56.8% مع الأساسيات إلى 88.6% مع سير العمل التلقائي الكامل.

تحدد التقييمات التفاعلية والمتعددة الوسائط تحديين بارزين متبقيين: التعامل الآمن مع المدخلات الرقمية غير الصالحة وإعادة بناء نماذج هيكلية مع الحفاظ على الدقة. تظهر هذه النتائج أن التقييم المتمركز حول العناصر يمكن أن يكشف عن إخفاقات على مستوى سير العمل يصعب التعرف عليها من الردود النهائية وحدها، مما يوفر أساسًا أكثر صرامة لتقييم وتحسين وكالات الهندسة الإنشائية.