Anthropic объявила об обновленной модели Claude 3.5 Sonnet, новом легковесной модели под названием Claude 3.5 Haiku и публичной бета-версии возможностей «computer use» для разработчиков.
- Обновленная Claude 3.5 Sonnet улучшает результаты в SWE-bench Verified с 33,4% до 49,0%, а также показатели TAU-bench в доменах розничной торговли и авиаперевозок, сохраняя ту же цену и скорость, что и у предыдущей версии.
- Claude 3.5 Haiku соответствует или превосходит Claude 3 Opus во многих бенчмарках интеллекта при скорости, сопоставимой с предыдущим поколением Haiku; цена составляет $0,80 за миллион входных токенов и $4 за миллион выходных токенов.
- Функция computer use позволяет Claude взаимодействовать с интерфейсами компьютеров, просматривая экраны и выполняя команды, такие как нажатие кнопок и ввод текста; она показала результат 14,9% в задачах OSWorld только по скриншотам, превзойдя следующий лучший результат системы в 7,8%.
- Новые модели доступны через Anthropic API, Amazon Bedrock и Google Cloud Vertex AI, при этом computer use в настоящее время находится в экспериментальной публичной бета-версии для получения обратной связи от разработчиков.