في عالم [الذكاء الاصطناعي](/tag/الذكاء-الاصطناعي) ([AI](/tag/ai))، تعتبر [نماذج [اللغة](/tag/اللغة) الكبيرة](/tag/[نماذج](/tag/نماذج)-[اللغة](/tag/اللغة)-الكبيرة) ([LLMs](/tag/llms)) من أهم الابتكارات، لكن [الأداء الفعال](/tag/[الأداء](/tag/الأداء)-الفعال) لها يعتمد كثيرًا على [تقنيات](/tag/تقنيات) [استئصال](/tag/استئصال) ([Pruning](/tag/pruning)) فعالة. هنا يأتي دور LEAP، وهي طريقة جديدة مصممة لتحقيق [كفاءة](/tag/كفاءة) أكبر في [استئصال](/tag/استئصال) [النماذج اللغوية](/tag/[النماذج](/tag/النماذج)-اللغوية).
LEAP، والتي تعني [استئصال](/tag/استئصال) [التعلم](/tag/التعلم) القابل للتكيف من النهاية إلى النهاية، تعد بديلاً حديثًا للاقتراحات التقليدية المعتمدة على طبقات، مثل طريقة Optimal Brain Surgeon. هذه الطرق على الرغم من كونها فعالة، إلا أنها تعاني من فقدان في [دقة](/tag/دقة) [الأداء](/tag/الأداء) عندما يتعلق الأمر بالتخفيض الكبير لمعدل الأبعاد.
تعتمد [LEAP](/tag/leap) على [تقنيات متقدمة](/tag/[تقنيات](/tag/تقنيات)-متقدمة) لتعلم الأقنعة (Masks) بشكل قابلة للتكيف، حيث تستخدم [تقنية](/tag/تقنية) Bernoulli-via-Gumbel-sigmoid لتخفيف [التعلم](/tag/التعلم) عن طريق تقليل التعقيدات الجبرية. وقد أظهرت النتائج المثيرة لهذا البحث، الذي تم اختباره على خمسة [عائلات](/tag/عائلات) من [النماذج اللغوية](/tag/[النماذج](/tag/النماذج)-اللغوية) بمعدل صلاحية يتراوح بين 50% و60%، تحسنًا ملحوظًا بمعدل +2.59 نقطة في [دقة](/tag/دقة) [الأداء](/tag/الأداء) للمهام الستة مقارنة بأفضل الأساليب الحالية.
ما يجعل [LEAP](/tag/leap) متميزًا هو قدرتها على [تحسين](/tag/تحسين) [دقة](/tag/دقة) [نماذج [اللغة](/tag/اللغة) الكبيرة](/tag/[نماذج](/tag/نماذج)-[اللغة](/tag/اللغة)-الكبيرة) مع الحفاظ على [كفاءة](/tag/كفاءة) الأداء، مما يعني أنها تفتح آفاق جديدة لاستخدامات [الذكاء الاصطناعي](/tag/الذكاء-الاصطناعي) في مجالات متعددة مثل [معالجة [اللغة](/tag/اللغة) الطبيعية](/tag/معالجة-[اللغة](/tag/اللغة)-الطبيعية) والتفاعل بين [الإنسان والآلة](/tag/الإنسان-والآلة).
فيما يتقدم عالم [الذكاء الاصطناعي](/tag/الذكاء-الاصطناعي) بخطوات كبيرة، يبدو أن [LEAP](/tag/leap) يعتبر خطوة نوعية [نحو](/tag/نحو) [نماذج](/tag/نماذج) ذات [تصميم](/tag/تصميم) أكثر ذكاءً ومرونة. هل أنتم مستعدون لهذا التغيير الثوري؟ شاركونا في [التعليقات](/tag/التعليقات)!
LEAP: تقنيات مبتكرة لاستئصال الذكاء الاصطناعي لتشكيل نماذج لغوية أكثر كفاءة!
تقديم LEAP، تقنية جديدة تتيح تعلم القناع بذكاء لنماذج اللغة الكبيرة، مما يحقق تحسينًا كبيرًا في دقة الأداء. هذه الخطوة تفتح آفاق جديدة لزيادة كفاءة نماذج الذكاء الاصطناعي عبر إزالة التقنيات التقليدية.
المصدر الأصلي:أركايف للذكاء
زيارة المصدر الأصلي ←جاري تحميل التفاعلات...
