يقدم المؤلفون WILDTRACE، وهو معيار جديد مصمم لتقييم مدى قدرة النماذج على دمج الأدلة المشتتة بشكل طبيعي عبر مقاطع بعيدة في المستندات الطويلة. وعلى عكس المعايير الموجودة التي تستخدم حقائق مزروعة أو سلاسل مُهندسة عكسياً، يعتمد WILDTRACE على المنطق السببي والزماني والسردي الداخلي للمصدر.
- يتكون المعيار من 481 مهمة عبر 214 مصدرًا طويلًا يحدث بشكل طبيعي، بما في ذلك تقارير الحوادث التقنية والسرديات الأدبية.
- يحدد سبعة هندسات للأدلة الداخلية للمصدر لوصف المتطلبات العلائقية للقراءة التحليلية.
- يستخدم خط أنابيب بناء أولوية المصدر لاستخراج مسارات مرشحة من بنية المستند قبل كتابة الأسئلة.
- تخضع كل عنصر للتحقق متعدد المراحل الذي يغطي ضرورة الأدلة، وأسس الإجابة، والوفاء بالمعايير، ومقاومة التلوث، وإمكانية الإجابة.
يعالج هذا العمل الفجوة بين الوصول إلى المعلومات والاستدلال على أدلة مشتتة بشكل طبيعي، والتي تُحدد كتحديد رئيسي لأبحاث السياق الطويل.