Falcon टीम ने Falcon-Emirati-7B जारी किया है, जो एक बोलि-विशिष्ट विशाल भाषा मॉडल है जिसे Falcon-H1-Arabic आधार पर बनाया गया है ताकि अमीरी अरबी को स्थानीय स्तर की सूक्ष्मता के साथ समझा और उत्पन्न किया जा सके। यह मॉडल आधुनिक मानक अरबी और संयुक्त अरब अमीरात की खाड़ी बोलियों के विशिष्ट शब्दावली, स्वर और सांस्कृतिक संदर्भ के बीच के अंतर को पूरा करता है।
- Falcon-H1-Arabic के 7B संस्करण पर बनाया गया, जो कुशल लंबे संदर्भ प्रसंस्करण के लिए हाइब्रिड Mamba-Transformer आर्किटेक्चर का उपयोग करता है।
- प्रामाणिक अमीरी वेब डेटा, अमीरी संस्कृति से संबंधित MSA सामग्री और विशिष्ट शब्दकोशों द्वारा सीमित सिंथेटिक डेटा के संपादित मिश्रण पर प्रशिक्षित।
- Alyah बेंचमार्क पर 84.83% सटीकता स्कोर हासिल किया, जो बड़े बहुभाषी मॉडलों से बेहतर है।
- खुले-अंत उत्पन्न करने में श्रेष्ठ बोलि निष्ठा प्रदर्शित की, जिसमें 0.52 स्कोर प्राप्त हुआ, जबकि ALLaM और Fanar जैसे प्रतिस्पर्धियों के स्कोर लगभग शून्य थे।
रिलीज में यह उजागर किया गया है कि सांस्कृतिक योग्यता के लिए लक्षित बोलि अनुकूलन आवश्यक है, क्योंकि सामान्य अरबी मॉडल स्थानीय बोलियों में उत्तर देने के लिए कहा जाने पर भी अक्सर आधुनिक मानक अरबी की ओर झुक जाते हैं।