اكتشاف علمي يغير مفهوم التخيل في نماذج اللغة: الديناميات الجاذبية غير المتناظرة
تكشف دراسة حديثة أن التخيل في نماذج اللغة التلقائية يمثل التزامًا مبكرًا بالمشاركة الديناميكية غير المتناظرة. النتائج تشير إلى أن تدخلات استباقية يمكن أن تعيد توجيه هذه الديناميات وتحسين دقة النتائج.
في عالم الذكاء الاصطناعي، يكمن أساس الفهم في كيفية عمل نماذج اللغة التلقائية. وفي الآونة الأخيرة، تم تسليط الضوء على ظاهرة التخيل (Hallucination) في هذه النماذج، مما يشير إلى أن هذا التخيل هو في الواقع التزام مبكر يرتبط بديناميات جاذبية غير متناظرة.
من خلال استخدام تقنية الانشطار في الموجهات المماثلة، تمكن الباحثون من عزل الديناميات الناتجة عن المدخلات المماثلة، مما ساعد في رصد كيف أن تخيل النتائج يمكن أن يتباين بشكل عشوائي Верно من خلال مجموعة من 61 مدخلاً تتوزع على ست فئات. أظهرت النتائج أن 44.3% من البيانات انشطروا، مما يشير إلى أن المسارات الفعلية والمخيلة بدأت في الانحراف في أول توكن (token) تم إنشاؤه، حيث سجل المؤشر (KL) قيم متباينة ما بين الخطوات.
ومن المثير للاهتمام أن تدخلا واحدًا أفضل (أو ما يعرف بتعديل التنشيط) يمكن أن يختل توازن نتائج المسار الصحيح في 87.5% من التجارب، في حين أن فعالية تحويل النتائج من المسار التخييلي لا تتجاوز 33.3%. كما بينت الأبحاث أن تصحيح المسارات يتطلب تدخل متعدد الخطوات، مما يدل على أن التخيل يُعتبر قاعدة جاذبية مستقرة محليًا.
تشير findings إلى أن الدخول في هذه الديناميات يحدث بسرعة واحتمالية، بينما يتطلب الخروج منها تدخلاً منسقًا بين الطبقات. هذه الاكتشافات تشكل خطوة هامة نحو فهم كيفية تحسين دقة النماذج اللغوية من خلال معالجة الفجوات الناتجة عن التخيل.
من خلال استخدام تقنية الانشطار في الموجهات المماثلة، تمكن الباحثون من عزل الديناميات الناتجة عن المدخلات المماثلة، مما ساعد في رصد كيف أن تخيل النتائج يمكن أن يتباين بشكل عشوائي Верно من خلال مجموعة من 61 مدخلاً تتوزع على ست فئات. أظهرت النتائج أن 44.3% من البيانات انشطروا، مما يشير إلى أن المسارات الفعلية والمخيلة بدأت في الانحراف في أول توكن (token) تم إنشاؤه، حيث سجل المؤشر (KL) قيم متباينة ما بين الخطوات.
ومن المثير للاهتمام أن تدخلا واحدًا أفضل (أو ما يعرف بتعديل التنشيط) يمكن أن يختل توازن نتائج المسار الصحيح في 87.5% من التجارب، في حين أن فعالية تحويل النتائج من المسار التخييلي لا تتجاوز 33.3%. كما بينت الأبحاث أن تصحيح المسارات يتطلب تدخل متعدد الخطوات، مما يدل على أن التخيل يُعتبر قاعدة جاذبية مستقرة محليًا.
تشير findings إلى أن الدخول في هذه الديناميات يحدث بسرعة واحتمالية، بينما يتطلب الخروج منها تدخلاً منسقًا بين الطبقات. هذه الاكتشافات تشكل خطوة هامة نحو فهم كيفية تحسين دقة النماذج اللغوية من خلال معالجة الفجوات الناتجة عن التخيل.
