ما الذي يجب على الوكلاء العامين الاحتفاظ به في ذاكرتهم لتحقيق الكفاءة العليا؟

تتناول الورقة البحثية الجديدة مسألة جوهرية تتعلق بوكلاء الذكاء الاصطناعي العامين وكيفية تحقيقهم لأداء مثالي عبر بيئات متعددة وأهداف متنوعة. فهي تقترح أنه لتلك الوكلاء القدرة على التصرف بشكل قريب من الكفاءة المثلى، يجب عليهم الحفاظ على معلومات محددة في ذاكرتهم.

تشير الدراسة إلى وجود صعوبات عندما يتشارك مجالان في عنق زجاجة رصد، بينما يتطلبان تحركات مثالية متضاربة. في هذه الحالات، تشير النتائج إلى أنه يجب على أي سياسة تكون قريبة من المثالية أن تُنتج توزيعات ذاكرة متميزة عند ذلك العنق الزجاجي.

هذا الأمر يؤدي إلى ما يسمى بنظرية التفريق في السلوك، والتي تنص على أن الوكلاء الناجحين لا يمكنهم الاكتفاء بمعلومات الحالة الحالية فقط. بل يجب عليهم الاحتفاظ بمعلومات ذات صلة بالقيام بالمهام بشكل فعال.

علاوة على ذلك، تظهر الورقة أن ذاكرة الوكيل، إذا كانت تحتوي على معلومات كافية، يمكن أن تُستخدم لتقدير القيم للأهداف ذات الصلة، مما يُمكن الوكيل من إعادة بناء ديناميات الانتقال المحلية بنجاح.

وبذلك، تقدم هذه النتائج رؤى مثيرة حول دور الذاكرة كقاعدة لدعم التمييز بين المجالات المختلفة وإعادة بناء نماذج الانتقال، بالإضافة إلى التخطيط لوكلاء الذكاء الاصطناعي العامين.