media MarkTechPost · il y a 10 h · releases

Alibaba Qwen publie Qwen3.8-Omni-Flash, un modèle omni-modal agentic avec une fenêtre de contexte de 1M

Traduit de English → Français

L'équipe Qwen d'Alibaba a publié Qwen3.8-Omni-Flash, son premier modèle omni-modal conçu autour de capacités agentic pour la compréhension audio-vidéo et l'utilisation d'outils. Le modèle accepte des entrées textuelles, images, audio et vidéo pour retourner des sorties textuelles, avec une fenêtre de contexte de 1M tokens et un appel de fonction natif.

Basé sur l'architecture Qwen3.8-Flash-Next, il offre un contexte de 1M tokens avec 991K tokens d'entrée max et 131K tokens de sortie max.
Il utilise un flux de perception agentic pour les longues vidéos, augmentant la précision OmniVideoBench de 63,4 à 67,8 tout en réduisant l'utilisation de tokens de 45,7 %.
Le modèle montre des gains de performance significatifs par rapport à Qwen3.5-Omni-Plus, avec des scores moyens améliorés de plus de 25 % sur 29 évaluations.
Il est disponible via API sur QwenCloud, Alibaba Cloud Model Studio et Qwen Studio, avec une tarification à 0,15 $ par 1M tokens d'entrée et 0,47 $ par 1M tokens de sortie.
L'équipe a également open-sourcé Qwen-MM-Plugins sous Apache-2.0 pour soutenir les harnesses agentic multimodaux.

La publication fournit une solution hébergée pour des flux de travail agentic complexes impliquant l'analyse audio et vidéo longue forme, avec des réductions de coûts signalées de plus de 93 % pour les entrées audiovisuelles par rapport aux modèles précédents.

Importance 3/3 Nouvelle fonctionnalité face aux leaders Nouveau cadre d'évaluation avec différenciateurs MarkTechPost Alibaba (Qwen) AI agents Multimodal

Lire l'original

Articles similaires

arxiv Moonshot AI (arXiv) · il y a 577 j · 5 vues

L'équipe Qwen publie le rapport technique sur Qwen2.5-VL

L'équipe Qwen d'Alibaba Group a publié un rapport technique détaillant Qwen2.5-VL, le dernier modèle phare de leur série vision-langage. Le rapport met en avant des avancées significatives dans la reconnaissance visuelle, la localisation d'objets, l'analyse de documents et la compréhension de vidéos longues.

media r/LocalLLaMA · il y a 6 j · 5 vues

InternLM publie le modèle multimodal Intern-S2-397B pour l'intelligence scientifique

InternLM a présenté Intern-S2-397B, un modèle fondamental multimodal de 397 milliards de paramètres conçu pour l'intelligence scientifique et les agents à long terme. Le modèle s'étend sur le pré-entraînement, la couverture des tâches d'apprentissage par renforcement et les environnements d'agents interactifs afin d'améliorer le raisonnement général et les capacités agentic.

arxiv arXiv cs.AI · il y a 10 j · 18 vues

ExecCritic utilise un RL spécifique au rôle pour améliorer les agents de codage via la réparation guidée par tests

ExecCritic introduit un cadre qui sépare la construction des tests de la réparation du code source afin d'éviter une confiance excessive dans les agents de codage. Le système emploie un agent Test et un agent Repair, tous deux alimentés par Qwen-3.5-35B-A3B, entraînés séparément à l'aide de l'apprentissage par renforcement.

arxiv arXiv cs.CL · il y a 10 j · 14 vues

ExecCritic utilise un RL spécifique au rôle pour améliorer les agents de codage via une réparation guidée par des tests

Les chercheurs présentent ExecCritic, un cadre qui combine un échafaudage de vérification-révision de tests avec un apprentissage par renforcement spécifique au rôle pour améliorer les agents de codage. Le système sépare la construction des tests de la réparation du code source, en utilisant un agent Test pour générer des tests natifs au dépôt et un agent Repair pour réviser le code sur la base des retours d'exécution.

arxiv arXiv cs.LG · il y a 12 j · 19 vues

La méthode d'incertitude spéculative réduit les erreurs des agents en ingénierie logicielle grâce au filtrage par modèle de brouillon

Les auteurs présentent l'Incertitude Spéculative (SU), une technique qui récupère un signal d'échec prédictif pour les agents LLM à boîte noire en analysant uniquement leurs tokens de sortie, sans nécessiter d'accès aux logits, aux poids ou aux activations. En inversant le décodage spéculatif, un petit modèle de brouillon à poids ouvert évalue la trajectoire de l'agent lors d'un seul passage avant pour extraire des caractéristiques sensibles à la phase et les calibrer par rapport à un objectif vérifiable.