Un desarrollador ha portado tres modelos de código abierto — OpenMOSS para texto a voz, ThinkSound para efectos de sonido y Trellis.2 para generación 3D — al framework GGML para crear una tubería local completa para generar activos de juegos.

  • OpenMOSS proporciona capacidades completas de clonación y generación de voz para personajes NPC.
  • ThinkSound maneja la generación de efectos de sonido, abordando un vacío dejado por los modelos de voz.
  • Trellis.2 sirve como el estado del arte actual para la generación 3D de código abierto, incluida la eliminación de fondo.
  • Todos los motores son compatibles con CUDA, Vulkan y ROCm para una amplia compatibilidad con hardware.

Estas herramientas ahora están integradas en el SDK Lemonade, permitiendo llamadas en cascada de modelos como un ciclo completo de texto a 3D usando stablediffusion.cpp.