أطلق المؤلف مراجعة DESi، وهي تطبيق عملي لإطار حوكمة معرفي مستقل عن النموذج يُعرف بـ DESi، مُعبّأً كمهارة Claude قابلة للتثبيت. يعمل هذا الأداة على تنفيذ خط أنابيب لمراجعة الأوراق البحثية بشكل مهيكل عبر النصوص الإنجليزية من خلال فصل استخراج الادعاءات الحتمية عن التقدير القائم على النموذج.

  • يستخرج النظام الادعاءات إلى دفتر حسابات قياسي ويستخدم Claude لتقييمها مقابل أربعة أحكام: مدعوم، مبالغ في تقديره، غير مدعوم، أو ليس ادعاءً.
  • تضمن الطبقة الحتمية الامتثال للمخطط، والتجزئة (hashing)، وحالة مستقرة ضد إعادة التشغيل دون إجراء استدعاءات للنموذج بنفسها.
  • يتطلب التثبيت اشتراكاً مدفوعاً لـ Claude، وتمكين تنفيذ الأكواد، والوصول إلى الشبكة لاستنساخ المستودعات العامة.
  • يقترح المؤلف اختبار A/B لمقارنة مراجعة DESi مع موجهات LLM العادية لقياس الفروقات في اكتشاف الادعاءات وإمكانية التدقيق.

يهدف المشروع إلى تحديد ما إذا كانت التغييرات الصريحة في البنية المعرفية تُغيّر نتائج المراجعة مقارنة بالموجهات القياسية، مع الإقرار بأن الطبقة الحتمية تتحكم في الهيكل لكنها لا تجعل الأحكام الدلالية معصومة من الخطأ.