Исследователи разработали Replica, масштабируемое пространство задач для репликации научных работ, чтобы удовлетворить потребность в надежных научных знаниях. Они провели постобучение Faraday — агента «AI Scientist» на 27B параметров, использующего кодовых агентов как инструменты — для работы в этой среде.
- Replica предоставляет автоматически генерируемого судью на основе рубрик с низким уровнем шума, который согласуется с человеческой оценкой качества репликации.
- Faraday превосходит по производительности Claude Opus 4.8 и GPT-5.5 на отложенных задачах репликации.
- Качественный анализ показывает, что Faraday использует более научно обоснованный подход по сравнению с другими моделями.
Результаты служат ступенькой к созданию AI-агентов, способных к долгосрочным научным инновациям без необходимости сложных инфраструктур.