lab Tencent Hunyuan (HF) · il y a 1 h · releases

Tencent open-source les modèles de traduction multilingue Hy-MT2 et IFMTBench

Traduit de English → Français

Tencent a publié la famille de modèles de traduction multilingue « à réflexion rapide » Hy-MT2, incluant les tailles 1.8B, 7B et 30B-A3B (MoE), ainsi que le benchmark IFMTBench pour évaluer les capacités de suivi d'instructions.

Les modèles prennent en charge la traduction parmi 33 langues et suivent efficacement les instructions dans plusieurs langues.
La quantification extrême AngelSlim à 1,25 bits réduit l'exigence de stockage du modèle 1.8B à 440 Mo et améliore la vitesse d'inférence de 1,5x.
Les évaluations montrent que les modèles 7B et 30B-A3B surpassent les modèles open-source comme DeepSeek-V4-Pro et Kimi K2.6 en mode à réflexion rapide, tandis que le modèle 1.8B dépasse les API commerciales grand public de Microsoft et Doubao.
La publication inclut un pipeline d'entraînement complet prenant en charge l'affinage plein paramètre, LoRA et les configurations DeepSpeed ZeRO.

Les modèles sont désormais disponibles sur HuggingFace et ModelScope, Tencent s'associant à WMT26 pour la « Tâche de traduction de sous-titres vidéo » afin d'encourager la participation de la communauté.

Importance 2/3 Confiance 1/3 Tencent Hunyuan (HF) Tencent Inference efficiency Open weights

Lire l'original

Articles similaires

media r/LocalLLaMA · il y a 9 j

llama.cpp ajoute le support de Hy3 avec le décodage spéculatif MTP

Une demande de tirage soumise au dépôt ggml-org/llama.cpp introduit le support pour le modèle Hy3 de Tencent, spécifiquement la variante hy_v3. Cette mise à jour permet d'utiliser la tête de prédiction multi-jeton du modèle comme cible de décodage spéculatif draft-mtp.

arxiv arXiv cs.AI · il y a 10 j

Deutsche Telekom lance Soofi S 30B-A3B pour l'allemand et l'anglais

Deutsche Telekom a publié Soofi S 30B-A3B, un modèle fondationnel Mixture-of-Experts souverain et open-source optimisé pour l'allemand et l'anglais. Construit sur le German Industrial AI Cloud, le modèle n'active que 3 milliards de ses 30 milliards de paramètres par token afin de maintenir un cache d'inférence quasi constant à mesure que le contexte augmente.

arxiv arXiv cs.LG · il y a 10 j · 1 vue

Deutsche Telekom lance Soofi S 30B-A3B, un modèle MoE open-source allemand-anglais

Deutsche Telekom a publié Soofi S 30B-A3B, un modèle de base hybride Mamba Transformer à experts multiples (Mixture-of-Experts) souverain et open-source conçu pour l'allemand et l'anglais. Construit de bout en bout sur le Cloud IA industriel allemand, le modèle n'active que 3 milliards de ses 30 milliards de paramètres par token afin de maintenir un cache d'inférence quasi constant à mesure que le contexte s'agrandit.

arxiv arXiv cs.CL · il y a 10 j · 2 vues

Deutsche Telekom publie Soofi S 30B-A3B, un modèle de base MoE hybride Mamba Transformer open-source

Deutsche Telekom a publié Soofi S 30B-A3B, un modèle de base Mixture-of-Experts (MoE) hybride Mamba Transformer open-source et souverain conçu pour l'allemand et l'anglais. Le modèle a été construit de bout en bout sur le Cloud IA industriel allemand.

media r/LocalLLaMA · il y a 13 j

LordNeel publie les quantifications GGUF pour Tencent Hy3 et NVIDIA Nemotron-Labs-Audex

LordNeel a publié des ensembles de quantification GGUF pour le modèle MoE Hy3 de 295B de Tencent et le modèle hybride MoE de 30B compatible audio Nemotron-Labs-Audex-30B-A3B de NVIDIA, fournissant des données de benchmark complètes et des métriques reproductibles.