Les chercheurs ont développé Replica, un espace de tâches évolutif pour la réplication d'articles, afin de répondre au besoin de connaissances scientifiques fiables. Ils ont effectué un post-entraînement de Faraday, un agent "AI Scientist" de 27 milliards de paramètres qui utilise des agents de codage comme outils, pour tirer parti de cet environnement.
- Replica fournit un juge basé sur des rubriques auto-généré avec peu de bruit, aligné sur l'évaluation humaine de la qualité de la réplication.
- Faraday dépasse les performances de Claude Opus 4.8 et GPT-5.5 sur les tâches de réplication conservées.
- L'analyse qualitative montre que Faraday adopte une approche plus fondée sur les principes scientifiques par rapport aux autres modèles.
Les résultats servent de tremplin vers des agents IA capables d'innovation scientifique à long terme sans nécessiter de harnais complexes.