Tencent 发布了 UI-Mate-27B，这是一个面向跨应用和操作系统长周期计算机使用的开源权重基础模型。该拥有 270 亿参数的模型通过观察实时屏幕截图来推理可见状态，并生成用于原生桌面交互的结构化键盘和鼠标操作。

  • 基于 Qwen3.6-27B 基础模型构建，采用监督微调和在线强化学习。
  • 支持通过自然语言指令和演示引导的工作流程进行通用计算机使用。
  • 具备实时屏幕接地功能而非坐标回放，允许在界面状态变化时重新规划。
  • 输出与 pyautogui 兼容的结构化操作，并提供与 openAI 兼容的服务接口。

该模型在 Hugging Face 和 GitHub 上以 Apache-2.0 许可证提供。