O sistema de Agente Web Autônomo (AWA) 1.5 obteve uma pontuação de 57,14% no benchmark WebArena, superando o recorde anterior de 35,8%. Este resultado marca a maior proximidade que um sistema de IA já teve em relação ao desempenho humano, que atualmente está em 78%.

  • O AWA 1.5 usa análise personalizada de HTML-DOM e processamento iterativo para imitar a interação semelhante à humana.
  • O WebArena fornece um ambiente controlado com sites em contêineres e saídas inequívocas para avaliação confiável.
  • O agente enfrenta desafios com ações de arrastar e clicar, tarefas com estado e requisitos estritos de correspondência de strings.

A conquista demonstra progresso significativo na autonomia da web ao abordar o ruído inerente e a variabilidade na avaliação de agentes na web aberta.