نشر المؤلف ورقة تجريبية وسجلاً مفتوحاً على Hugging Face لقياس نقطة تشبع الأدلة (k*) للنماذج اللغوية. يحدد هذا المقياس العدد الأمثل لشظايا الأدلة التي يتم حقنها في المطالبات، حيث إن إضافة المزيد من السياق لا يحسن الصحة بشكل رتيب ويمكن أن يزيد التكلفة أو التلوث المعرفي.

  • وجدت الدراسة أن القيمة المثلى لـ k للصحة تتراوح من 1 إلى مجموعة الأدلة الكاملة اعتماداً على نوع المهمة، مما يشير إلى أن ملف تعريف سياق واحد غير كافٍ.
  • تم إنشاء Evidence-k Registry مفتوح على Hugging Face، وتمت زراعته بـ 35 قياساً على مستوى المهمة من الورقة.
  • يدعو السجل مشغلي النماذج المحلية للمساهمة من خلال توثيق مراجعات النماذج، والكمّنة، والخوادم الخلفية المقدمة، ومقاييس الموثوقية.

تهدف هذه المبادرة إلى توفير بروتوكول قابل للتكرار لمعايرة نوافذ السياق لكل نموذج وخادم خلفي لتحقيق التوازن بين الصحة والكفاءة.