يحدد الباحثون "تسميم المستندات القديمة"، وهو فشل في المحاذاة الزمنية في التوليد المعزز بالاسترجاع (RAG) حيث يؤدي الدليل الخارجي القديم إلى تقديم النماذج لإجابات خاطئة رغم معرفتها بالإجابة الصحيحة دون استرجاع.
- تبني الدراسة معياراً قياسياً لـ 317 انقلاباً مؤكداً للمعرفة عبر الطب والقانون والبرمجيات وسياسات المنصات.
- يؤدي الاسترجاع القديم إلى قلب 30% من إجابات Llama و37% من إجابات Qwen حتى دون تعليمات بالوثوق بالمستند.
- ترفع التعليمات المتابعة الصريحة معدلات التسميم إلى 66% لـ Llama و75% لـ Qwen.
- تتراوح نسبة التسميم بين 17-91% عبر أربعة نماذج مفتوحة ومجالاتها، بينما يُتبع الدليل المحدّث في 97-100% من المحاولات.
- يقلل مُعيد الترتيب الهجين الحساس للتجدد والمصحح من التسميم بمقدار 4.6-10.0 نقطة عندما تكون التواريخ دقيقة.
تشير النتائج إلى أن RAG الموثوق يتطلب ثقة انتقائية، حيث يجب على النماذج تحديد ليس فقط ما يقوله الدليل المسترجع ولكن ما إذا كان لا يزال قابلاً للتطبيق.