腾讯发布了UI-Mate-democua-27B检查点,这是其UI-Mate GUI代理的演示引导版本,能够将录制的流程适应到新任务中。该模型观察实时屏幕截图,并对可见状态进行推理以生成结构化操作,使用演示作为指导而非固定脚本。
- 参数量:27B,基于Qwen3.6-27B,采用Apache-2.0许可证。
- 通过在混合通用数据和增强演示数据上进行监督微调进行训练,保留了仅指令的能力。
- 演示被分割为子任务并带有完成标准;模型根据实时屏幕重新规划路径,而非重放坐标。
- 评估显示在OSWorld-Subset(18个任务改进)和GameDev(轨迹更短)上性能提升,并在chrome-02等之前无法解决的任务上获得满分。
此次发布使得基于截图的GUI代理研究成为可能,允许模型从上下文演示中学习程序性知识,从而提高复杂多应用任务的成功率。