Un utilisateur de Reddit rapporte que Mimo v2.5 surpasse DeepSeek V4 Flash dans les tâches de codage après un benchmarking via un point de terminaison Open Code. L'auteur a testé plusieurs modèles en utilisant le harnais Terminal Bench v2.0, découvrant que Hermes a obtenu 55 % avec Mimo v2.5 tandis que d'autres combinaisons ont obtenu moins de 50 %. Bien que DeepSeek V4 Flash soit considéré comme un modèle solide, l'utilisateur a trouvé Mimo v2.5 plus utile pour la résolution de problèmes complexes de la vie réelle.
- Hermes a obtenu un score de 55 % sur Terminal Bench v2.0 lorsqu'il était associé à Mimo v2.5 via le point de terminaison Open Code.
- D'autres modèles et harnais, y compris DeepSeek V4 Flash, ont obtenu moins de 50 % lors des mêmes tests.
- L'utilisateur a testé Hy3 Preview mais a trouvé ses scores faibles et estimé qu'il était trop entraîné sur les benchmarks.
- Hermes a été identifié comme l'outil CLI supérieur pour les modèles de bas niveau dans cette étude de cas spécifique.