تتحقق الدراسة من استخراج العلاقات عبر اللغات للغة الرومانية عن طريق ترجمة معيار SemEval-2010 Task 8 وتقييم Gemma 4 31B مقابل النماذج الأساسية للمُشفِّر. تُظهر النتائج أن الضبط الدقيق بـ QLoRA يحسّن درجة F1 الكلية بأكثر من 22 نقطة مئوية، مما يقلل الفجوة عبر اللغات من 3,3 إلى 1,4 نقطة مئوية.

  • تعاني الرومانية من انخفاض يتراوح بين 3 و5 نقاط مئوية مقارنة بالإنجليزية في إعدادات الاعتماد على الوحي فقط.
  • يوفر التوجيه بعدد قليل من الأمثلة (Few-shot) مكاسب هامشية فقط مقارنة بعدم استخدام أمثلة (Zero-shot).
  • تقترب النماذج الأساسية للمُشفِّر من أداء QLoRA Gemma بمقدار 1-4 نقاط مئوية رغم أنها أصغر بحجم يتراوح بين 50 و250 مرة.
  • يعادل BERT أحادي اللغة الروماني ذو الـ 125 مليون معامل نظيره متعدد اللغات XLM-R ذي الـ 278 مليون معامل.

يخلص المؤلفون إلى أن استخدام نموذج بحجم 31B لاستخراج العلاقات لمهمة واحدة على اللغة الرومانية يعتبر ضعيفًا في سيناريوهات النشر حيث يكون الحوسبة عاملاً مهماً.