أطلقت Liquid AI نموذجين جديدين للمشفرين، هما LFM2.5-Encoder-230M وLFM2.5-Encoder-350M، مصمَّمين لتقديم تشفير ثنائي الاتجاه عالي الجودة مع قياس فعال يصل إلى طول سياق يبلغ 8,192 رمزًا.
- مبنية على بنية LFM2 الهجينة، تستخدم النماذج قناع انتباه ثنائي الاتجاه وتلافيف قصيرة غير سببية لمعالجة السياق الكامل.
- تتضمن عملية التدريب هدف نمذجة اللغة المقنعة بمعدل قناع بنسبة 30٪، يليه تكيف مع السياق الطويل لتعزيز الكفاءة الواقعية والمتعددة اللغات.
- تُظهر الاختبارات المعيارية أن LFM2.5-Encoder-350M يحتل المرتبة الرابعة بين 14 نموذجًا في مهام GLUE/SuperGLUE، بينما يتفوق المتغير بحجم 230M على ModernBERT-base.
- على الأجهزة القائمة على وحدة المعالجة المركزية، يكون النموذج بحجم 230M أسرع بحوالي 3.7 مرات من ModernBERT-base عند معالجة 8,192 رمزًا، مما يجعله مناسبًا للأجهزة الطرفية والبيئات الخاضعة للوائح.
تسمح هذه النماذج ذات الأوزان المفتوحة للمطورين بضبطها بدقة لتصنيف النوايا وتوجيهها وفلترة السلامة مباشرة على وحدات المعالجة المركزية أو في عمليات النشر على وحدات معالجة الرسومات منخفضة زمن الاستجابة.