Tencent выпустила чекпоинт UI-Mate-democua-27B — версию своего GUI-агента UI-Mate, управляемую демонстрациями, которая способна адаптировать записанные рабочие процессы к новым задачам. Модель анализирует живые скриншоты и рассуждает на основе видимых состояний для формирования структурированных действий, используя демонстрации в качестве руководства, а не жестких скриптов.
- Параметры: 27B, основана на Qwen3.6-27B, лицензия Apache-2.0.
- Обучение проводилось методом контролируемой тонкой настройки на смешанных данных общего назначения и данных с дополненными демонстрациями, при этом сохранялась способность выполнять инструкции.
- Демонстрации разбиваются на подзадачи с критериями завершения; модель перепланирует действия на основе живых экранов, а не воспроизводит координаты.
- Оценка показала улучшение результатов в OSWorld-Subset (улучшения по 18 задачам) и GameDev (более короткие траектории), а также идеальные баллы по ранее нерешаемым задачам, таким как chrome-02.
Выпуск позволяет проводить исследования GUI-агентов, основанных на скриншотах, предоставляя моделям возможность обучаться процедурным знаниям из демонстраций в контексте, что повышает успешность выполнения сложных многоприложенийых задач.