연구원들은 신뢰할 수 있는 과학적 지식의 필요성을 해결하기 위해 논문 복제를 위한 확장 가능한 작업 공간인 Replica 를 개발했습니다. 그들은 이 환경을 활용하기 위해 코딩 에이전트를 도구로 사용하는 27B 파라미터 "AI Scientist" 에이전트인 Faraday 의 사후 학습을 수행했습니다.

  • Replica 는 복제 품질에 대한 인간 평가와 일치하는 낮은 노이즈의 자동 생성 루브릭 기반 판정을 제공합니다.
  • Faraday 은 홀드아웃된 복제 작업에서 Claude Opus 4.8 및 GPT-5.5 의 성능을 능가합니다.
  • 정성적 분석은 Faraday 이 다른 모델보다 더 과학적 원칙에 기반한 접근 방식을 채택하고 있음을 보여줍니다.

이 결과는 복잡한 하네스 없이 장기적인 과학적 혁신을 수행할 수 있는 AI 에이전트로 가는 디딤돌 역할을 합니다.