Tencent telah merilis checkpoint UI-Mate-democua-27B, versi yang dipandu demonstrasi dari agen GUI UI-Mate-nya yang dapat mengadaptasi alur kerja yang direkam ke tugas baru. Model tersebut mengamati tangkapan layar secara langsung dan melakukan penalaran atas keadaan yang terlihat untuk menghasilkan tindakan terstruktur, menggunakan demonstrasi sebagai panduan daripada skrip tetap.

  • Parameter: 27B, berbasis pada Qwen3.6-27B, berlisensi di bawah Apache-2.0.
  • Dilatih melalui fine-tuning terawasi pada data umum dan data yang diperkaya demonstrasi secara campuran, mempertahankan kompetensi instruksi saja.
  • Demonstrasi dipotong menjadi sub-tugas dengan kriteria penyelesaian; model melakukan perencanaan ulang dari layar langsung daripada memutar ulang koordinat.
  • Evaluasi menunjukkan peningkatan kinerja pada OSWorld-Subset (18 tugas meningkat) dan GameDev (lintasan lebih pendek), dengan skor sempurna pada tugas yang sebelumnya tidak dapat dipecahkan seperti chrome-02.

Rilis ini memungkinkan penelitian mengenai agen GUI berbasis tangkapan layar dengan memungkinkan model mempelajari pengetahuan prosedural dari demonstrasi dalam konteks, meningkatkan tingkat keberhasilan pada tugas multi-aplikasi yang kompleks.