一位开发者将三个开源模型——用于文本转语音的 OpenMOSS、用于音效的 ThinkSound 以及用于 3D 生成的 Trellis.2——移植到了 GGML 框架,以创建用于生成游戏资产的完整本地管线。

  • OpenMOSS 为 NPC 角色提供完整的语音克隆和生成功能。
  • ThinkSound 处理音效生成,弥补了语音模型留下的空白。
  • Trellis.2 是目前开源 3D 生成的最先进模型,包括背景移除功能。
  • 所有引擎均支持 CUDA、Vulkan 和 ROCm,以实现广泛的硬件兼容性。

这些工具现已集成到 Lemonade SDK 中,支持级联模型调用,例如使用 stablediffusion.cpp 进行完整的文本转 3D 循环。