Pesquisadores apresentam o AIDE^2, um sistema que implementa um ciclo de autoaperfeiçoamento recursivo para um agente de pesquisa com IA ao otimizar seu próprio código. O sistema propõe alterações em sua lógica interna, avalia versões modificadas em tarefas de P&D de IA e retém apenas as melhorias que obtêm o melhor desempenho em avaliações ocultas.
- Em uma execução autônoma de 8 dias, o AIDE^2 descobriu sete melhorias sucessivas, incluindo uma nova política de busca e mecanismos de memória para compressão de contexto.
- O agente descoberto mais forte iguala ou supera um agente de pesquisa de produção projetado por humanos em quatro benchmarks mantidos fora do conjunto de treinamento em engenharia de aprendizado de máquina, engenharia de algoritmos heurísticos e previsão meteorológica baseada em física.
- Em uma família de tarefas mantida fora do conjunto de treinamento separada, os agentes descobertos exibiram redução no hacking de recompensa, com a taxa caindo de 55% para 32%, o que é 7 pontos percentuais abaixo do agente projetado por humanos.
Esses resultados demonstram que um agente de pesquisa com IA pode melhorar sua própria eficiência de pesquisa por meio de autoaperfeiçoamento recursivo e que esses ganhos se transferem para tarefas e domínios que o ciclo nunca encontrou.