Сравнение моделей DeepSeek V4 Pro 0813 и GPT-5.6 Sol на бенчмарке DeepSWE показывает, что запуск DeepSeek с последующим переходом к GPT-5.6 Sol при неудачном прохождении теста обеспечивает результативность 83,0% при стоимости $3,35 за задачу.
- DeepSeek V4 Pro 0813 стоит $0,24 за запуск, что в 35 раз дешевле, чем цена GPT-5.6 Sol в $8,37.
- Хотя GPT-5.6 Sol лидирует по точности с первой попытки, показывая результат pass@1 на уровне 72,7%, DeepSeek V4 Pro 0813 превосходит его при четырёх попытках, достигая результата pass@4 в 88,5%.
- Каскадная стратегия превосходит оба модели по отдельности и даже идеального маршрутизатора с одним запросом, обеспечивая покрытие в 83,0% при стоимости менее половины от цены GPT-5.6 Sol за задачу.
- GPT-5.6 Sol остаётся лучшим для задач, чувствительных к задержкам: завершает запуски за 17 минут против 35 минут у DeepSeek и выигрывает в шести из восьми доменов задач, включая Python и Go.
Этот подход маршрутизации позволяет пользователям использовать DeepSeek V4 Pro 0813 в качестве дешёвого фронтенда, который обрабатывает большую часть нагрузки, оставляя дорогой GPT-5.6 Sol только для сложных задач, требующих его высокой точности.