텐센트 HY Frontier Multimodal Agent Team은 애플리케이션과 운영 체제 전반의 장기 작업용으로 설계된 오픈 가중치 기반 GUI 에이전트인 UI-Mate-27B를 출시했습니다. 이 모델은 실시간 스크린샷을 관찰하여 표시된 상태를 추론하고, 네이티브 데스크톱 상호작용을 위해 구조화된 키보드 및 마우스 동작을 생성합니다.
- 기본 모델: 270억 개의 파라미터를 가진 Qwen3.6-27B.
- 자연어 명령과 재사용 가능한 워크플로우에 적응하는 시연 기반 사용에서 일반적인 컴퓨터 작업 지원.
- 훈련은 실행 가능한 GUI 환경에서 지도 미세 조정 후 온라인 강화 학습을 포함합니다.
- 시연은 가이드로 처리되어 인터페이스 상태가 다를 때 모델이 재계획할 수 있게 합니다.
- GameDev 벤치마크에서 시연 가이드는 평균 트래젝토리 길이를 303.6단계에서 253.1단계로 줄입니다.
이번 출시는 통제된 데스크톱 환경에서의 연구 및 개발을 목적으로 vLLM 및 OpenAI 인터페이스와 호환되는 Apache-2.0 라이선스 체크포인트를 제공합니다.