개발자가 OpenMOSS, ThinkSound, Trellis를 ggml로 포팅하여 로컬 자산 생성

한 개발자가 텍스트 음성 변환용 OpenMOSS, 효과음 생성용 ThinkSound, 3D 생성용 Trellis.2 등 세 가지 오픈소스 모델을 GGML 프레임워크로 포팅하여 게임 자산을 위한 완전한 로컬 파이프라인을 만들었습니다.

• OpenMOSS는 NPC 캐릭터를 위한 전체 음성 클론 및 생성 기능을 제공합니다.
• ThinkSound는 효과음 생성을 처리하며 음성 모델이 남긴 간극을 메웁니다.
• Trellis.2는 배경 제거를 포함한 오픈소스 3D 생성의 현재 최첨단 기술입니다.
• 모든 엔진은 CUDA, Vulkan, ROCm을 지원하여 광범위한 하드웨어 호환성을 제공합니다.

이 도구들은 이제 Lemonade SDK에 통합되어 stablediffusion.cpp를 사용한 전체 텍스트-3D 사이클과 같은 캐스케이딩 모델 호출을 가능하게 합니다.