NVIDIA के शोधकर्ता ARDY प्रस्तुत करते हैं, जो एक स्ट्रीमिंग जनरेटिव फ्रेमवर्क है जिसे रियल-टाइम इंटरैक्टिव एप्लिकेशन में उच्च-फिडेलिटी 3D मानव गति संश्लेषण सक्षम बनाने के लिए डिज़ाइन किया गया है। सिस्टम स्पष्ट रूट फीचर्स को लैटेंट बॉडी एम्बेडिंग्स के साथ जोड़कर ऑफलाइन सटीकता और ऑनलाइन गति के बीच की खाई को पाटता है।
- यह एक हाइब्रिड प्रतिनिधित्व का उपयोग करता है जो सटीक ट्राजेक्टरी नियंत्रण को कुशल जनरेटिव लर्निंग के साथ संतुलित करता है।
- यह दो-चरणीय ऑटोरेग्रेसिव ट्रान्सफॉर्मर डीनॉइज़र का उपयोग करता है जो वेरिएबल हिस्ट्री कॉन्टेक्स्ट को संभालने में सक्षम है।
- यह फ्लेक्सिबल, लॉंग-होराइजन किनेमेटिक बाधाओं और ऑनलाइन टेक्स्ट प्रॉम्प्ट्स पर कंडीशनिंग का समर्थन करता है।
- नियंत्रित जनरेटिव को नेटिवली सीखने के लिए बड़े-स्केल मوشन कैप्चर डेटा पर प्रशिक्षित किया गया।
- गति की गुणवत्ता और बाधा अनुपालन के लिए HumanML3D और Bones Rigplay बेंचमार्क पर मान्य किया गया।
फ्रेमवर्क उपयोगकर्ताओं को गतिशील टेक्स्ट, कीफ्रेम पोसेस, पथ फॉलोइंग और इंटरैक्टिव लोकोमोशन के माध्यम से गति को नियंत्रित करने की अनुमति देता है, जिससे यह एनीमेशन, सिमुलेशन और ह्यूमनॉइड रोबोटिक्स के लिए उपयुक्त बन जाता है।