Les chercheurs ont présenté Qwen-CUA, un agent d'utilisation native du ordinateur construit sur une colonne vertébrale à experts mélangés Qwen de 397B-A17B. Le système fonctionne en observant des captures d'écran et en agissant par le biais d'événements clavier et souris, sans s'appuyer sur les arbres DOM ou les métadonnées d'accessibilité.

  • Il maintient jusqu'à 20 captures d'écran actives et regroupe l'historique visuel plus ancien en blocs de taille fixe pour conserver les preuves récentes.
  • L'entraînement a utilisé une flotte de déploiement cloud avec près de 100 000 vCPU et environ 40 000 tâches vérifiables.
  • Qwen-CUA surpasse Qwen3.7 sur huit benchmarks, atteignant 86,2 sur OSWorld-Verified et 18,5/48,4 pour la complétion binaire/partielle sur OSWorld 2.0.
  • L'extension de l'approche à plus d'un billion de paramètres donne Qwen-CUA-Max, améliorant les scores à 87,6 et 21,2/53,3 respectivement.
  • Le modèle réduit le taux de succès des attaques RedTeamCUA de 36,6 à 16,4 par rapport à Qwen3.7.

Ces résultats établissent l'utilisation native du ordinateur comme une base d'agent largement capable, mettant en évidence l'interaction vérifiable évolutive et l'utilisation hybride d'outils comme des directions clés.