Une comparaison entre DeepSeek V4 Pro 0813 et GPT-5.6 Sol sur le benchmark DeepSWE démontre que l'exécution de DeepSeek en premier, puis la montée en puissance vers GPT-5.6 Sol en cas d'échec du test, atteint un taux de réussite de 83,0 % pour 3,35 $ par tâche.
- DeepSeek V4 Pro 0813 coûte 0,24 $ par rollout, ce qui le rend 35 fois moins cher que le prix de 8,37 $ de GPT-5.6 Sol.
- Bien que GPT-5.6 Sol domine la précision à une tentative avec un taux pass@1 de 72,7 %, DeepSeek V4 Pro 0813 le dépasse à quatre tentatives avec un score pass@4 de 88,5 %.
- La stratégie en cascade bat les deux modèles exécutés seuls et surpasse un routeur oracle parfait en un seul essai en atteignant une couverture de 83,0 % pour moins de la moitié du coût par tâche de GPT-5.6 Sol.
- GPT-5.6 Sol reste supérieur pour les tâches sensibles à la latence, complétant les rollouts en 17 minutes contre 35 minutes pour DeepSeek, et remporte six des huit domaines de tâches, y compris Python et Go.
Cette approche de routage permet aux utilisateurs d'exploiter DeepSeek V4 Pro 0813 comme une interface avant à faible coût qui traite la plupart des charges de travail, en réservant le coûteux GPT-5.6 Sol uniquement aux tâches difficiles nécessitant sa plus grande précision.