Registro de Modelos: Torrents para modelos abiertos usando Hugging Face como semilla web de respaldo.

Se ha creado un nuevo repositorio y sitio llamado Registro de Modelos para publicar y compartir archivos .torrent de modelos abiertos populares, utilizando Hugging Face como semilla web de respaldo. El proyecto incluye scripts para automatizar el proceso y un servicio backend que redirige los clientes BitTorrent al punto final correcto de Hugging Face.

• El sistema utiliza la CDN de Hugging Face como respaldo cuando no hay pares disponibles a través de protocolos BitTorrent estándar.
• Un servicio backend personalizado maneja la redirección según si los archivos se almacenan en LFS o no, cumpliendo con BEP 0019.
• El proyecto es actualmente experimental y está en desarrollo, con planes de automatizar la creación de .torrent usando GitHub Actions.
• Las limitaciones incluyen la restricción de espacio en disco de ~100 GB de los ejecutores gratuitos de GitHub para modelos que superan ese tamaño.

Este enfoque busca facilitar la distribución más fácil de grandes modelos abiertos combinando la eficiencia del torrent con la infraestructura de Hugging Face, aunque sigue siendo un proyecto en etapa temprana sujeto a problemas de fiabilidad de la CDN.