PyTorch 正在开发一种新的通信后端,利用 Thunderbolt 接口实现 macOS 设备上分布式模型训练和推理的高速数据传输。
这一发展针对的是对高效多 GPU 或多 Apple Silicon 集群设置的日益增长的需求,其中 Thunderbolt 提供的带宽显著高于标准网络选项。
该添加旨在提高通过 Thunderbolt 连接的多台 Mac 上运行分布式工作负载的用户性能。
PyTorch 正在开发一种新的通信后端,利用 Thunderbolt 接口实现 macOS 设备上分布式模型训练和推理的高速数据传输。
这一发展针对的是对高效多 GPU 或多 Apple Silicon 集群设置的日益增长的需求,其中 Thunderbolt 提供的带宽显著高于标准网络选项。
该添加旨在提高通过 Thunderbolt 连接的多台 Mac 上运行分布式工作负载的用户性能。