يقترح الباحثون إطار عمل COALA، وهو إطار عمل قوي مصمم لتعزيز نماذج اللغة المعززة بالكلام (SLMs) للتعرف التلقائي على الكلام في سيناريوهات متعددة الكيانات المعقدة. يعالج النظام قيود نافذة السياق عن طريق تمثيل الضمائر الكامنة لـ SLMs في فضاء تمييزي لتكميم شدة التطابق بين مقاطع الصوت والكيانات المرشحة.

  • يُمثل الضمائر الكامنة لـ SLMs في فضاء تمييزي متخصص لتحديد الكيانات المستهدفة ذات الصلة من قوائم التحيز واسعة النطاق.
  • يعالج انهيار التدريب في الدراسات السابقة عند التعامل مع نطق متعدد الأهداف حيث تتزامن فيه كلمات نادرة متعددة.
  • يستخدم مُنظِّمًا تباينيًا وتقنيات تقدير درجة التحيز.
  • يُظهر أداءً متفوقًا للتحيز السياقي عبر مقاييس مختلفة لقوائم التحيز على معيار LibriSpeech.