연구원들은 논문 복제를 위한 확장 가능한 작업 공간인 Replica 를 개발하고, 인간의 평가와 일치하는 저잡음 보상 신호를 제공하기 위해 자동 생성된 루브릭 기반 판정을 도입했습니다.

  • 팀은 코딩 에이전트를 도구로 활용하는 27B 파라미터 "AI Scientist" 에이전트인 Faraday 의 사후 학습을 수행했습니다.
  • Faraday 은 홀드아웃 복제 작업에서 Claude Opus 4.8 및 GPT-5.5 보다 성능이 뛰어납니다.
  • 정성적 분석에 따르면 Faraday 은 롤아웃 동안 더 과학적인 접근 방식을 채택합니다.

저자들은 이러한 결과가 복잡한 하네스 없이 장기적인 과학적 혁신을 수행할 수 있는 AI 에이전트로 가는 디딤돌을 제공한다고 믿습니다.