Um desenvolvedor portou três modelos de código aberto — OpenMOSS para texto-para-fala, ThinkSound para efeitos sonoros e Trellis.2 para geração 3D — para o framework GGML para criar um pipeline local completo para gerar ativos de jogos.

  • O OpenMOSS fornece capacidades completas de clonagem e geração de voz para personagens NPC.
  • O ThinkSound lida com a geração de efeitos sonoros, preenchendo uma lacuna deixada pelos modelos de voz.
  • O Trellis.2 serve como o estado da arte atual para geração 3D de código aberto, incluindo remoção de fundo.
  • Todos os motores suportam CUDA, Vulkan e ROCm para ampla compatibilidade com hardware.

Essas ferramentas agora estão integradas ao SDK Lemonade, permitindo chamadas em cascata de modelos, como um ciclo completo de texto-para-3D usando stablediffusion.cpp.