A H2O.ai anunciou que seu agente empresarial h2oGPTe alcançou a primeira posição no ranking do benchmark GAIA (General AI Assistants), obtendo 65%. Este resultado supera significativamente outras grandes submissões, incluindo o Langfun Agent do Google em 49% e o uso do OpenAI o1 pela Microsoft Research em 38%.
- O benchmark GAIA, criado pela Meta-FAIR, HuggingFace e outros, testa a IA em tarefas do mundo real que exigem raciocínio, manipulação de multimodalidade e uso de ferramentas em 466 perguntas.
- O h2oGPTe alcança sua pontuação usando uma abordagem simplificada com o Sonnet 3.5 da Anthropic, cache de prompts e estrutura mínima, em vez de orquestração complexa de múltiplos agentes.
- O agente integra ferramentas para navegação na web, execução de código, manipulação de arquivos e modelagem de ciência de dados sem exigir ajuste fino dos modelos fundamentais.
- Este desempenho destaca uma mudança de aplicativos SaaS independentes para agentes de IA que podem orquestrar várias ferramentas e fontes de dados para fluxos de trabalho empresariais.
A conquista valida a estratégia da H2O.ai de construir sistemas de IA adaptáveis e econômicos que possam auxiliar em tarefas práticas sem restrições arquitetônicas rígidas.