텐센트는 기록된 워크플로우를 새로운 작업에 적응시킬 수 있는 데모스트레이션 기반 버전인 UI-Mate GUI 에이전트의 UI-Mate-democua-27B 체크포인트를 출시했습니다. 이 모델은 라이브 스크린샷을 관찰하고 가시화된 상태를 추론하여 구조화된 동작을 생성하며, 고정된 스크립트 대신 데모스트레이션을 가이드로 사용합니다.
- 파라미터: 27B, Qwen3.6-27B 기반, Apache-2.0 라이선스.
- 일반 데이터와 데모스트레이션 증강 데이터를 혼합한 지도 학습 미세 조정(SFT)을 통해 훈련되었으며, 명령어 전용 능력을 보존합니다.
- 데모스트레이션을 완료 기준이 있는 하위 작업으로 분할하며, 모델은 좌표를 재생하는 대신 라이브 화면에서 재계획합니다.
- 평가 결과 OSWorld-Subset(18개 작업 개선)과 GameDev(짧은 트래젝토리)에서 성능이 향상되었으며, chrome-02와 같은 이전에는 해결 불가능했던 작업에서 완벽 점수를 기록했습니다.
이번 출시는 모델이 컨텍스트 내 데모스트레이션을 통해 절차적 지식을 학습할 수 있게 함으로써 스크린샷 기반 GUI 에이전트 연구를 가능하게 하며, 복잡한 다중 애플리케이션 작업에서의 성공률을 높입니다.