يقترح الباحثون نهج استعادة خفيف الوزن يعتمد على التوجيه (prompting) لتحسين المتانة عندما تفشل مكالمات قاعدة البيانات الخلفية أو تُرجع معلومات غير متطابقة في وكلاء الحوار الموجه بالمهام، دون الحاجة إلى إعادة التدريب.
- تم التقييم عبر ست عائلات نماذج ذات أوزان مفتوحة (DeepSeek-R1, Gemma-2, Llama-3, Mistral, Phi-3, و Qwen-2.5) وأربع ظروف لقواعد البيانات بما في ذلك النتائج الفارغة وأخطاء واجهة برمجة التطبيقات.
- تم الاختبار على معايير اختبار حقن الأعطال المبنية على مجموعات بيانات MultiWOZ 2.2 و SGD.
- أظهرت الوكلاء البسطاء توهّمات في 30.5% من أدوار الفشل على MultiWOZ و 20.9% على SGD.
- قللت استراتيجية Guided-Retry التوهّمات بنسبة 50% على MultiWOZ (إلى 15.3%) وبنسبة 42% على SGD (إلى 12.2%).
- ظلت التوهّمات المتبقية كبيرة (6-37% عبر النماذج)، وكانت أخطاء المجال الخاطئ هي الحالة الأصعب.
تُظهر الدراسة أن شرطة الاستجابات بناءً على حالة قاعدة البيانات المهيكلة يحسّن بشكل كبير مقاييس الأمان، رغم استمرار الأخطاء المتبقية خاصة في سيناريوهات الاسترجاع المعقدة.