एक अध्ययन विषय श्रेणी और भावना के अनुसार खुले-सिर के शिक्षण-मूल्यांकन प्रतिक्रिया को वर्गीकृत करने के लिए एक मान्यता प्राप्त प्रोटोकॉल की टिकाऊता और अंतर-भाषा स्थानांतरणीयता का मूल्यांकन करता है।
- शोधकर्ताओं ने तीन प्रतिनिधित्व जनरेशन का उपयोग करके मूल स्पैनिश डेटा पर प्रोटोकॉल को फिर से चलाया: विरल शब्दिक विशेषताएं, फ्रोजन ट्रान्सफॉर्मर एम्बेडिंग्स, और प्रॉम्प्टेड बड़े भाषा मॉडल।
- उन्होंने एक संतुलित 45,000 टिप्पणीयों के कॉर्पस का उपयोग करके भावना कार्य को अंग्रेजी में स्थानांतरित किया, जिसे एक पहलू-लेबल वाले शिक्षण डेटासेट के खिलाफ जांचा गया था।
- 2026 का फ्रंटियर मॉडल सबसे कठिन स्पैनिश कार्य पर उच्चतम विषय F1 प्राप्त करने में सफल रहा, लेकिन सस्ते मॉडलों की तुलना में भावना में कोई लाभ नहीं दिखाया।
लेखकों का निष्कर्ष है कि मॉडल चयन एक तैनाती निर्णय है न कि विधि का गुण, क्योंकि प्रोटोकॉल अलग-अलग प्रतिनिधित्व तकनीकों और भाषाओं के पार प्रभावी रहता है।