एक उपयोगकर्ता ने आधुनिक कोडिंग एजेंट्स का परीक्षण किया, Codex से Pikachu Volleyball गेम को UmLang में पोर्ट करने के लिए कहा, जो एक अस्पष्ट कोरियाई मेम प्रोग्रामिंग भाषा है। एजेंट ने लगभग 41 घंटे के काम के बाद परियोजना को सफलतापूर्वक पूरा किया।
- परिणामी कोड का मूल्यांकन नेटिव Rust, मूल JavaScript और विभिन्न UmLang वर्चुअल मशीनों के खिलाफ हीडलेस सिम्युलेशन थ्रूपुट का उपयोग करके किया गया।
- प्रदर्शन रैंकिंग में Rust को पहले स्थान पर रखा गया, इसके बाद मूल JS आया, फिर Rust, Node और Python VMs पर UmLang कार्यान्वयन आए।
- सटीकता सभी कार्यान्वयनों में स्थिर रही, जिसमें प्रदर्शन के अंतर को रनटाइम ओवरहेड के कारण बताया गया।
परियोजना कोडिंग एजेंट्स की अत्यंत कम संसाधन वाली भाषाओं को संभालने की क्षमता को उजागर करती है और यह सवाल उठाती है कि भाषा-विशिष्ट अभिव्यक्तियाँ भविष्य के AI इंटरैक्शन को कैसे प्रभावित कर सकती हैं।