في عالم التكنولوجيا الحديثة، تواجه الأنظمة المعتمدة على استرجاع البيانات وزيادة أدائها تحديات كبيرة في إدارة التكاليف. لذا، أحدثت تقنية "RAG المدعومة بالتكلفة" (Cost-Governed RAG) ضجة كبيرة بتقديمها حلاً فعالًا لتحسين إدارة النفقات في أنظمة نماذج اللغات الضخمة (Large Language Models - LLM) متعددة المستأجرين.
تقوم هذه التقنية بمعالجة الفجوة الرئيسية الموجودة في إدارة التكاليف. بينما تكون تكاليف إنشاء النصوص محاسبة بدقة لكل رمز (token)، تبقى تكاليف طبقة الاسترجاع - مثل الذاكرة المتجهة (vector memory) وحسابات التشابه (similarity compute) - غير معروفة، مما يؤدي إلى توزيع غير عادل للتكاليف بين المستأجرين.
لكن مع "RAG المدعومة بالتكلفة"، تم دمج فهرس المتجهات الذي لا يعتمد على الكود (TurboVec) مع بوابة حوكمة متعددة المستأجرين، مما أدى إلى إنشاء نظام مراقبة موحد. تتيح هذه الهندسة تقدير تكاليف الاسترجاع والإنتاج بدقة لكل مستأجر، مما يضمن الشفافية والعدالة.
لقد أثبت النظام نجاحه بعد نشره على خدمات Snowpark Container، حيث حقق دقة تجاوزت 99.96% في تقدير التكاليف عبر 100 مستأجر محاكى (10 ملايين متجه، مع توزيع أحجام يعتمد على لوغاريتمات طبيعية). علاوة على ذلك، استطاع النظام تقليل تكاليف بنية الاسترجاع بما يتراوح بين 3.1 إلى 9.0 أضعاف مقارنة بخدمات قواعد البيانات المدارة.
مع دخول هذه التقنية الجديدة حيز الاستخدام العملي، يصبح لدينا أداة قوية لتحسين تكاليف الأنظمة المعقدة، مما يوفر للمؤسسات رؤية شاملة لتكاليفها ويساهم في زيادة الكفاءة بشكل ملحوظ.
ما رأيكم في هذا التطور المثير؟ شاركونا في التعليقات!
تكنولوجيا RAG المدعومة بالتكلفة: تغيير قواعد لعبة إدارة التكاليف في أنظمة LLM متعددة المستأجرين!
تقدم تقنية RAG المدعومة بالتكلفة حلاً مبتكرًا لجعل تكاليف استرجاع البيانات متناسبة مع كل مستأجر، مما يعالج مشكلة التوزيع غير العادل للتكاليف. هذه الهندسة الجديدة تعزز من دقة تقدير النفقات وتخفض التكاليف بنسب ملحوظة.
المصدر الأصلي:أركايف للذكاء
زيارة المصدر الأصلي ←جاري تحميل التفاعلات...
