طلب المستخدم thamilvendhan إضافة مجموعة بياناته، SignalBench، إلى القائمة المسموحة للمقاييس في مركز Hugging Face. يسمح هذا التسجيل للمنصة بتجميع نتائج تقييم المجتمع للمقياس الجديد.
يقدم SignalBench الامتثال للإشارة ضمن النطاق (IBSC)، وهو مقياس يتميز بمؤشر واحد يسمى دقة استجابة الإشارة. يقيم وكلاء نماذج اللغات الكبيرة (LLM) على مشكلات الإفراط في الامتثال مثل حقن الأوامر، وفشل نقص الامتثال مثل العمى الزمني، ورفض الوصول، وأخطاء تسميات الذاكرة، وانتهاكات سياسة البوت. تُرخص مجموعة البيانات بموجب رخصة Apache 2.0 وتحدد خمس عائلات مهام: time، access_deny، memory_label، injection، وbot_policy.
يؤدي إضافة المقياس إلى القائمة المسموحة إلى تمكين تجميع نتائج تقييم المجتمع عبر مركز Hugging Face بأكمله.