تشهد نماذج اللغة الكبيرة (Large Language Models) اهتماماً متزايداً كأداة للإجابة على أسئلة ذات طابع ثقافي عبر مختلف اللغات. ومع ذلك، يبقى السؤال مطروحاً: هل يتم الوصول إلى المعرفة الثقافية المحلية بشكل أفضل عند استخدام الإنجليزية أم عند استخدام اللغة المحلية؟

في دراسة حديثة، تم تسليط الضوء على نقص التقييمات الحالية، حيث أظهرت أن الكثير منها يعتمد على أسئلة قائمة على قالب موازٍ قد لا تعكس كيفية ظهور المعرفة الثقافية في الواقع. بالإضافة إلى ذلك، التقييمات ذات الدقة الأولية تلخبط بين الكفاءة اللغوية العامة والوصول إلى المعرفة المرتبطة باللغة.

للتصدي لهذه القضايا، وضعت الدراسة إطار عمل محكوم يعتمد على أسئلة ثقافية حقيقية تم جمعها من معايير إقليمية ومصادر محلية. وقامت بفحص نوع السؤال (ثقافي غير معني مقابل ثقافي معين) بالتزامن مع لغة الاستعلام (الإنجليزية مقابل اللغة المحلية). من خلال تقدير القدرة باستخدام نموذج استجابة من نوع 1PL، تم الفصل بين الكفاءة والوصول إلى المعرفة المحلية.

أظهرت النتائج عبر 13 منطقة ونحو 80 نموذجًا أن الإنجليزية تتفوق بانتظام على الأسئلة الثقافية غير المعنية، مما يدل على كفاءة أعلى. ومع ذلك، بعد الأخذ بعين الاعتبار الفجوة في الكفاءة، أظهرت اللغات المحلية ميزة إيجابية في الوصول إلى المعرفة في معظم الإعدادات المحلية والنموذجية. وغالباً ما تُخفي هذه الميزة في الدقة الأولية، ولكن تصبح أكثر وضوحاً لنماذج الحدود، النماذج المتوافقة مع المنطقة، أو النماذج المعدلة لغوياً.

تشير هذه النتائج إلى أن الأداء الأضعف في اللغات المحلية لا يعني بالضرورة محدودية المعرفة الثقافية؛ بل قد تكون المعرفة الثقافية المحلية أكثر وصولاً من خلال اللغة المحلية، ولكنها مخفية بسبب محدودية الكفاءة اللغوية.

ما رأيكم في هذه الاكتشافات؟ وهل تعتقدون أن علينا تعزيز استخدام اللغات المحلية في البحث الثقافي؟ شاركونا في التعليقات!