Сравнение моделей DeepSeek V4 Pro 0813 и Claude Fable 5 по бенчмарку DeepSWE показывает, что стратегия маршрутизации с использованием обеих моделей решает 82,7% задач при стоимости $8,28 за каждую, превосходя использование только Fable (69,7%) и будучи значительно дешевле.
- Claude Fable 5 лидирует по точности с первой попытки (pass@1 = 69,7%) и отлично справляется с задачами на Rust (85%) и сериализацией, но стоит $21,63 за один проход, что примерно в 90 раз дороже DeepSeek V4 Pro 0813.
- DeepSeek V4 Pro 0813 дешевле ($0,24 за проход) и демонстрирует более высокую точность при нескольких попытках (pass@4 = 88,5% против 84,1% у Fable), что делает её лучшим выбором для задач с высокой нагрузкой или допускающих повторные попытки.
- Модели показывают низкую корреляцию по отдельным задачам (0,39), совместно покрывая 107 из 113 задач, что обосновывает каскадный подход: запуск Pro сначала и переход к Fable только при необходимости.
Анализ показывает, что Fable 5 лучше использовать как средство селективного повышения уровня для конкретных доменов, таких как Rust, а не в качестве модели по умолчанию, тогда как DeepSeek V4 Pro 0813 обеспечивает точность, близкую к Fable, за долю стоимости.