أصدر فريق Tencent HY Frontier Multimodal Agent نموذج UI-Mate-27B، وهو وكيل أساسي لواجهات المستخدم بوزن مفتوح مصمم للمهام طويلة المدى عبر التطبيقات وأنظمة التشغيل. يراقب النموذج لقطات الشاشة الحية لاستنتاج الحالات الظاهرة ويُنتج إجراءات لوحة المفاتيح والفأرة المهيكلة للتفاعل مع سطح المكتب الأصلي.
- النموذج الأساسي: Qwen3.6-27B بـ 27 مليار معلمة.
- يدعم الاستخدام العام للكمبيوتر من خلال تعليمات اللغة الطبيعية والاستخدام الموجه بالأمثلة الذي يتكيف مع سير العمل القابل لإعادة الاستخدام.
- يتضمن التدريب ضبطاً دقيقاً بالإشراف يليه تعلم تعزيزي عبر الإنترنت في بيئات واجهة مستخدم قابلة للتنفيذ.
- تُعامل الأمثلة كدليل، مما يسمح للنموذج بإعادة التخطيط عندما تختلف حالات الواجهة.
- على معايير GameDev، يقلل التوجيه بالأمثلة متوسط طول المسار من 303.6 إلى 253.1 خطوة.
يوفر الإصدار نقطة تفتيش مرخصة بموجب رخصة Apache-2.0 متوافقة مع واجهات vLLM وOpenAI، ومقصودة لأغراض البحث والتطوير في بيئات سطح المكتب الخاضعة للرقابة.