SkyPilot a intégré Hugging Face Storage en tant que backend de première classe, permettant aux charges de travail IA de s'exécuter sur n'importe quel cloud tout en conservant les modèles et les jeux de données sur le Hub sans frais d'egress. Cette intégration permet aux utilisateurs de monter des Buckets ou des dépôts Hugging Face dans les jobs SkyPilot à l'aide d'un seul schéma d'URL `hf://`.
- Monte des Buckets Hugging Face en lecture/écriture ou des dépôts de modèles/jeux de données en lecture seule via les modes `MOUNT` ou `COPY`.
- Exécute des jobs sur plus de 20 clouds, Kubernetes, Slurm et des clusters on-prem en tirant parti de l'ordonnancement multi-cloud de SkyPilot.
- Élimine les coûts d'egress pour la lecture des données, car Hugging Face Storage ne facture aucun frais d'egress ou de CDN.
- Utilise la déduplication basée sur Xet pour ne stocker que les chunks modifiés pour les checkpoints incrémentaux et les variantes de modèles.
Cela permet aux équipes d'utiliser des GPU réservés ou à la demande auprès de plusieurs fournisseurs sans être liées à la région de stockage d'un cloud spécifique, réduisant ainsi les coûts et la complexité.