تتحقق هذه الورقة من وكلاء النماذج اللغوية الكبيرة (LLM) التأملّيين في مهام اتخاذ القرار المشترك التعاوني الذي يتسم بملاحظات جزئية وغير متماثلة. يُشكّل المؤلفون هذا السيناريو كمشكلة تتطلب تبادل المعلومات عبر التأمل لتحقيق مكافأة مشتركة.
- يقدم مقياساً قابلاً للتوسع يجسّد المشكلة عبر إعدادات ومجالات مهام متعددة.
- يؤسس إطاراً مرجعياً وبروتوكول تقييم للوكلاء التأملّيين.
- يجري تقييماً منهجياً لنماذج LLM الممثلة على هذه المهام.
- يجد أن التعاون التأملّي المعقّد لا يزال يُحدّي أحدث النماذج اللغوية.
- يلاحظ أنه بينما تساعد الأدوات الرياضية الخارجية، قد تفشل النماذج في المحاذاة أو الاستدلال.
- يكشف أن التأمل يسمح بالتأمل الذاتي وتصحيح الأخطاء، مما يحسّن الأداء أحياناً مقارنةً بالخطوط الأساسية المركزية.
يؤسس هذا العمل أساساً لتقييم وتحسين وكلاء LLM في التعاون التأملّي ويقدّم رؤى حول نقاط القوة والضعف في أنظمة الوكلاء المتعددة الحالية.