media
MarkTechPost
·
il y a 19 j
·
23 vues
Tencent publie AngelSpec, un cadre d'entraînement unifié pour MTP et le décodage spéculatif bloc-parallèle
Tencent a open-sourcé AngelSpec, un framework d'entraînement natif torch qui prend en charge à la fois la prédiction multi-jeton autoregressive (MTP) et les drafters de famille DFlash bloc-parallèles pour les modèles Hy3. Le système traite l'hétérogénéité des charges de travail comme une contrainte de conception principale, lui permettant de spécialiser la structure, les données d'entraînement et la profondeur de vérification en fonction de cas d'utilisation spécifiques.