يقدم الباحثون إطار عمل قائمًا على الرسوم البيانية يُسمى GRAPHEVAL، يعيد صياغة قياس عدم اليقين (UQ) كمشكلة شاملة لمدى دقة الاستدلال لمعالجة عيوب استراتيجيات فك التشفير القياسية مثل Self-Consistency. تقترح الدراسة درجة تماسك الاستدلال البياني (Graph Reasoning Coherence Score - GRCS)، وهي مقياس يكمم الإجماع الدلالي-الهيكلية ويلتزم الانهيار النمطي المرضي والهلاوس المتحيزة.
- تم تحديد GRCS كمقياس واحد يتناسب عكسياً بشكل متسق مع دقة الاستدلال عبر كل من النماذج الأكثر قدرة والنماذج الأصغر حجماً.
- يقدم الإطار استراتيجية فك تشفير قائمة على الوسيط تُسمى Graph Self-Consistency (GSC)، والتي توازن بين الدقة الاسمية ومدى دقة الاستدلال.
- تكشف GSC عن كيفية تضخيم Self-Consistency بواسطة تخمينات محظوظة غير دقيقة في النماذج الأصغر، مع الحفاظ على الدقة أو تحسينها في النماذج الأكثر قدرة.
- تُظهر إزالة الوسيط العدائية أن المسار الذي اختاره GSC يعمل كـ "مسار حامل للعبء"، حيث يؤدي إجبار النماذج على الابتعاد عنه إلى تدهور دقة الاستدلال وتسبب انخفاضاً في الدقة.
يعتقد المؤلفون أن هذا مهم لأنه يوفر طريقة لاختيار استدلال أكثر دقة مقارنة بالتصويت الأغفائي البسيط، مما يكشف عن مدى عدم دقة الاستدلال في طرق التقييم القياسية.