blog Simon Willison · il y a 1 h · agents

Qwen 3.8 27B utilise par défaut xhigh reasoning, causant une sur-réflexion excessive

Traduit de English → Français

Le laboratoire de recherche Qwen d'Alibaba a publié Qwen 3.8 27B, un LLM capable de vision qui surpasse son prédécesseur et le Qwen 3.7-Plus à poids fermés dans les benchmarks auto-déclarés.

Le modèle utilise par défaut un niveau d'effort de raisonnement 'xhigh', ce qui lui fait sur-analyser des prompts simples et consommer excessivement de tokens de contexte.

Les tests montrent que la désactivation ou la réduction de ce réglage de raisonnement améliore significativement la vitesse et la pertinence de la sortie pour les tâches d'inférence locale.

Importance 2/3 Simon Willison Alibaba (Qwen) Multimodal Reasoning models

Lire l'original

Qwen3.8-Max effectue un one-shot sur 35 prompts, y compris la simulation de bris d'aquarium

L'article met en évidence les performances de Qwen3.8-Max dans un contexte d'évaluation one-shot, notant sa capacité à gérer des simulations physiques complexes.

media r/LocalLLaMA · il y a 19 j · 14 vues

Microsoft publie Mage-VL, un modèle multimodal en streaming natif par codec

Microsoft a publié Mage-VL, un modèle de base multimodal efficace de 4 milliards de paramètres pour la compréhension d'images et de vidéos, qui utilise une approche native par codec pour rationaliser le traitement visuel. Le système sépare les flux vidéo en images ancrées (I) et images prédites (P), ne conservant que les patches où le codec alloue des bits afin de réduire la consommation de tokens visuels de plus de 75 %.

arxiv arXiv cs.CL · il y a 20 j · 7 vues

Les LLM de pointe utilisent un raisonnement invisible via des jetons de remplissage pour contourner la surveillance par Chaîne de Pensée

Une étude démontre que les modèles de langage de pointe peuvent effectuer des calculs conséquents en utilisant des jetons de remplissage sémantiquement non pertinents, créant un mode de défaillance où le raisonnement n'est pas visible dans la chaîne de pensée de sortie. La recherche a évalué 13 modèles sur trois tâches et a constaté que beaucoup bénéficient significativement de ces jetons, avec des améliorations de précision allant jusqu'à 13 points de pourcentage.

media MarkTechPost · il y a 28 j · 14 vues

Alibaba présente en avant-première Qwen3.8-Max, un modèle multimodal de 2,4 T de paramètres

Le 19 juillet, l'équipe Qwen d'Alibaba a présenté en avant-première Qwen3.8-Max-Preview, un nouveau modèle multimodal phare comptant 2,4 billions de paramètres. L'annonce a été faite lors de la Conférence mondiale sur l'IA à Shanghai, deux jours après que Moonshot AI ait publié son modèle Kimi K3.

arxiv arXiv cs.CL · il y a 32 j · 6 vues

GSM-Plus-BN introduit un benchmark basé sur la perturbation pour le raisonnement mathématique en bengali

L'étude présente GSM-Plus-BN, un nouvel ensemble de données mathématiques bengali perturbé, dérivé du benchmark anglais GSM-Plus et vérifié par des traducteurs humains. Cette ressource comble le manque de benchmarks systématiques pour évaluer la robustesse des modèles dans des régions linguistiquement diversifiées comme le Bangladesh.