开发者 ZimengXiong 完成了 Hunyuan3D-Paint 和 Hunyuan3D-Shape 模型的 Swift-MLX 和 Python MLX 移植,实现了在 Apple Silicon 设备上的本地图像到 3D 生成。该工作以开源 Modelr 桌面应用的形式分发,适用于 macOS 和 iOS,并附带将技术集成到 Swift 应用程序中的源代码。

  • 在 M4 Max 上的基准测试显示,hy3d shape (small) 使用约 5.6 GB 内存耗时 20.9 秒完成,而 hy3d shape (large) 使用约 7.3 GB 内存耗时 22.3 秒。
  • hy3d paint 模型需要显著更多的资源,RGB 纹理生成耗时 231 秒(峰值内存约 38 GB),PBR 纹理生成耗时 344 秒(峰值内存约 39 GB)。
  • MLX 实现允许在最近的 Mac 和 iPhone 上使用 Q4 或 Q8 量化运行这些模型,避免了 PyTorch 开销或 CPU 执行的性能损失。

此移植使得在消费级 Apple 硬件上以低内存需求本地运行图像到 3D 生成成为可能,为 macOS/iOS 提供独立应用,并为开发者提供库。