A Anthropic anunciou um modelo Claude 3.5 Sonet atualizado, um novo modelo leve chamado Claude 3.5 Haiku e o lançamento da versão beta pública das capacidades de "uso do computador" para desenvolvedores.
- O Claude 3.5 Sonnet atualizado melhora as pontuações do SWE-bench Verified de 33,4% para 49,0% e as pontuações do TAU-bench nos domínios de varejo e companhias aéreas, mantendo o mesmo preço e velocidade de seu antecessor.
- O Claude 3.5 Haiku iguala ou supera o Claude 3 Opus em muitos benchmarks de inteligência com velocidade semelhante à geração anterior do Haiku, com preços definidos em US$ 0,80 por milhão de tokens de entrada e US$ 4 por milhão de tokens de saída.
- O uso do computador permite que o Claude interaja com interfaces de computador visualizando telas e executando comandos como clicar e digitar; ele obteve 14,9% nas tarefas do OSWorld apenas com captura de tela, superando os 7,8% do próximo melhor sistema.
- Os novos modelos estão disponíveis por meio da API da Anthropic, Amazon Bedrock e Vertex AI do Google Cloud, com o uso do computador atualmente em versão beta pública experimental para feedback dos desenvolvedores.