باحث يبحث عن موافقة من arXiv cs.CL لورقة بحثية تقدم Simple Retrieval-Reconstruction Memory (SRRM)، وهو مقياس خفيف الوزن مصمم لتقييم ذاكرة السياق الطويل في نماذج اللغة الصغيرة.
على عكس مقاييس الاسترجاع الحالية، يقيم SRRM بشكل مشترك الاسترجاع المستهدف، وإعادة بناء المعلومات العالمية، ومقياسًا جديدًا يُسمى Memory Preservation Ratio (MPR). اختبر المؤلفون عائلة نموذج Qwen2.5 (0.5B و1.5B و3B) تحت أحمال سياق تتراوح بين 10 إلى 100 عبارة واقعية.
أظهرت النتائج أن نموذج Qwen2.5-1.5B تفوق باستمرار على النموذج الأكبر حجمًا 3B من حيث دقة الاسترجاع، وأداء إعادة البناء، وMPR، مما يشير إلى أن عدد المعلمات وحده لا يحسن بالضرورة الحفاظ على ذاكرة السياق الطويل.