Um usuário testou agentes de codificação modernos pedindo ao Codex para portar o jogo Pikachu Volleyball para o UmLang, uma linguagem de programação esotérica e meme coreana. O agente concluiu com sucesso o projeto após aproximadamente 41 horas de trabalho.
- O código resultante foi avaliado usando throughput de simulação sem cabeça contra Rust nativo, JavaScript original e várias máquinas virtuais do UmLang.
- A classificação de desempenho colocou o Rust em primeiro lugar, seguido pelo JS Original, depois pelas implementações do UmLang nas VMs de Rust, Node e Python.
- A correção permaneceu consistente em todas as implementações, com diferenças de desempenho atribuídas à sobrecarga do tempo de execução.
O projeto destaca a capacidade dos agentes de codificação de lidar com linguagens de recursos extremamente baixos e levanta questões sobre como abstrações específicas de linguagem podem influenciar futuras interações de IA.