يقدم الباحثون SPANUQ، وهو مجس خفيف الوزن يقوم بتقدير عدم اليقين على مستوى النطاق (SLUE) من خلال تقطير معرفة عدم اليقين من الاستدلال متعدد العينات إلى تمرير أمامي واحد عبر الحالات المخفية للنموذج اللغوي الكبير. تستخدم الطريقة فك تشفير نطاقات بنمط DETR للكشف عن النطاقات وتقدير عدم يقينها في وقت واحد عبر خليط من توزيع بيتا.
- SPANUQ-BENCH هو أول معيار لعدم اليقين على مستوى النطاق، ويتكون من 20 ألف طلب، و293 ألف نطاق مُعلّم، وتسميات ناعمة مستمرة مشتقة من التحقق متعدد العينات من الادعاءات.
- أظهرت التجارب على خمسة هياكل خلفية للنماذج اللغوية الكبيرة أن SPANUQ يحقق باستمرار أفضل جودة لعدم اليقين على مستوى النطاق، متفوقًا على أقوى أساس للمجسات وجميع الطرق القائمة على أخذ العينات مع كونه أسرع بـ 10 إلى 20 مرة.
- يحقق كاشف النطاقات المستند إلى DETR الخاص به دقة F1 تبلغ 0.910، متجاوزًا أفضل إرشادية بنسبة 39.4٪، مما يتيح تحديد موقع الأخطاء بدقة وهو ما لا يمكن للطرق على مستوى التسلسل توفيره.
يعمم الإطار عبر خمسة نماذج لغوية كبيرة تغطي عائلتين من النماذج، معالجًا قيود درجات عدم اليقين على مستوى الرمز المميز وعلى مستوى التسلسل.