في عالم تتسارع فيه التطبيقات الذكية لتلبية احتياجات المستخدمين، أصبح من الضروري تسريع عمليات المعالجة لتجارب سلسة وفعّالة. وتعيش اليوم نماذج اللغات الضخمة (Large Language Models - LLMs) لحظة انفجارها في استخداماتها، خاصة مع انتشار الأجهزة الذكية وأجهزة إنترنت الأشياء (IoT).
لكن، بالرغم من انبهارنا بقدرات هذه النماذج، إلا أن استخدامها في الأجهزة ذات الموارد المحدودة يعد تحديًا كبيرًا. لذلك، تم اعتماد معالجة ما يُعرف بالتحليل الطبقي بين الحافة والسحابة، مما يسمح للأجهزة المتواضعة بالمساهمة في العمليات الحاسوبية لنماذج اللغات التي لا يمكنها استضافتها بالكامل.
هنا يأتي دور الابتكار الجديد DySCo! تم تطوير DySCo لتقديم تجربة معالجة متكاملة، من خلال تقنيات جديدة مثل dyForward، التي تُدير نطاقات طبقات متجاورة من نماذج مركّبة دون الحاجة إلى إعادة تحميل الأوزان. كما تعرفنا على تقنية التحميل المتزامن للعمق (Depth-Synchronized Batching - DSB) التي تساعد في تسريع معالجة الطلبات المتنوعة.
أظهرت التجارب أن استخدام DSB يؤدي إلى تحسين الإنتاجية بنسبة تصل إلى 275% مقارنة بأسلوب FIFO التقليدي و48% مقارنة بالتحميل المتطابق تمامًا، في حين أنه يقلل من زمن الاستجابة بشكل كبير.
إذاً، مع افتراض أن الطلبات المختلفة يمكن أن تتشارك في الأوزان المقيمة السحابية، يبدو أن DySCo ليست مجرد تقنية جديدة، بل قد تكون نقطة تحول في المجال. هل أنتم مستعدون لاستكشاف آفاق جديدة في الذكاء الاصطناعي؟
DySCo: ثورة جديدة في نماذج اللغات الضخمة من خلال تقسيم ديناميكي حديث
تقدم تقنية DySCo الجديدة حلاً مبتكرًا لتقليل زمن الاستجابة وتحسين كفاءة استخدام نماذج اللغات الضخمة (LLMs) عبر توظيف المعالجة السحابية وأجهزة الطرفية بشكل متزامن. هل ستغير DySCo الطريقة التي نتفاعل بها مع التطبيقات الذكية؟
المصدر الأصلي:أركايف للذكاء
زيارة المصدر الأصلي ←جاري تحميل التفاعلات...
