Mistral AI et All Hands AI ont publié Devstral, un grand modèle de langage agentique conçu pour des tâches d'ingénierie logicielle en conditions réelles. Le modèle est entraîné à résoudre de véritables problèmes GitHub en exécutant des squelettes d'agents de code tels qu'OpenHands ou SWE-Agent.

  • Devstral obtient un score de 46,8 % sur le benchmark SWE-Bench Verified, surpassant les modèles open-source state-of-the-art précédents de plus de 6 points de pourcentage.
  • Il dépasse les performances de modèles plus grands tels que Deepseek-V3-0324 (671B) et Qwen3 232B-A22B lorsqu'il est évalué avec le même squelette de test.
  • Le modèle surpasse les alternatives closed-source comme GPT-4.1-mini de plus de 20 % sur ce benchmark.
  • Devstral est suffisamment léger pour s'exécuter localement sur un seul RTX 4090 ou un Mac avec 32 Go de RAM, et il est disponible sous la licence Apache 2.0.

Cette publication vise à fournir un outil pour le déploiement local, l'utilisation en entreprise dans des environnements sensibles à la confidentialité, et l'intégration dans des IDEs de codage agentique.