技术创新研究所发布了 Falcon-Emirati-7B,这是一款基于 Falcon-H1-Arabic 架构构建的方言专用大型语言模型,能够以母语级准确性理解和生成阿联酋阿拉伯语。

该模型利用混合状态空间模型和 Transformer 注意力结构,在高效处理长序列的同时,保持对形态丰富语言的精确性。训练过程涉及一个专用管道,结合了真实的阿联酋网络数据、聚焦本地文化的现代标准阿拉伯语内容以及严格约束的合成数据,以确保语法和文化保真度。

Falcon-Emirati-7B 在 Alyah 基准测试中取得了 84.83% 的得分,优于更大的多语言模型。在开放式生成测试中,与 ALLaM 和 Jais 等竞争对手相比,它展现了更优越的方言保真度,后者即使在以阿联酋语提问时也常常默认使用现代标准阿拉伯语。

此次发布强调,方言能力需要针对性训练,而非仅依赖模型规模,从而解决阿联酋特定的词汇、语气和文化背景问题。