Tencent ने अपने UI-Mate GUI एजेंट का एक प्रदर्शन-निर्देशित संस्करण, UI-Mate-democua-27B चेकपॉइंट जारी किया है, जो रिकॉर्ड किए गए कार्यप्रवाहों को नई कार्यों के लिए अनुकूलित कर सकता है। मॉडल लाइव स्क्रीनशॉट देखता है और संरचित क्रियाएं उत्पन्न करने के लिए दिखाई देने वाली स्थितियों पर तर्क करता है, निश्चित स्क्रिप्टों के बजाय प्रदर्शनों का मार्गदर्शन के रूप में उपयोग करता है।
- पैरामीटर: 27B, Qwen3.6-27B पर आधारित, Apache-2.0 लाइसेंस के तहत।
- सामान्य और प्रदर्शन-संवर्धित डेटा के मिश्रण पर सुपरवाइज्ड फाइन-ट्यूनिंग के माध्यम से प्रशिक्षित, केवल निर्देश क्षमता को बनाए रखते हुए।
- प्रदर्शनों को पूर्णता मानदंडों के साथ उपकार्यों में विभाजित किया गया है; मॉडल निर्देशांकों को दोहराने के बजाय लाइव स्क्रीन से पुनः योजना बनाता है।
- मूल्यांकन OSWorld-Subset (18 कार्यों में सुधार) और GameDev (छोटे ट्राजेक्टरी) पर बेहतर प्रदर्शन दिखाता है, जैसे कि chrome-02 जैसे पहले असंभव कार्यों पर पूर्ण स्कोर।
इस रिलीज ने इन-कॉन्टेक्स्ट प्रदर्शनों से प्रक्रियात्मक ज्ञान सीखने की अनुमति देकर स्क्रीनशॉट-आधारित GUI एजेंट्स के शोध को सक्षम बनाया है, जटिल बहु-अनुप्रयोग कार्यों पर सफलता दरों में सुधार करते हुए।