Para peneliti telah mengembangkan Replica, ruang tugas yang dapat diskalakan untuk replikasi makalah, dan memperkenalkan hakim berbasis rubrik yang dihasilkan secara otomatis untuk memberikan sinyal hadiah rendah-noise yang selaras dengan penilaian manusia.
- Tim melakukan pasca-pelatihan pada Faraday, agen "AI Scientist" 27B parameter yang memanfaatkan agen pemrograman sebagai alat.
- Faraday melampaui kinerja Claude Opus 4.8 dan GPT-5.5 pada tugas replikasi yang diisolasi.
- Analisis kualitatif menunjukkan bahwa Faraday mengadopsi pendekatan yang lebih berprinsip ilmiah selama rollouts.
Para penulis percaya bahwa hasil ini memberikan batu loncatan menuju agen AI yang mampu berinovasi secara ilmiah dalam jangka panjang tanpa memerlukan harness kompleks.