저자들은 신뢰할 수 있는 기존 지표가 없는 상황에서 자기 개선을 가능하게 하기 위해 평가 지표와 에이전트 스킬이 공동 진화하는 프레임워크를 제안합니다. 이 접근 방식은 작은 결함 검출기의 조합을 검색하기 위해 진화적 생명 주기를 활용하며, 고정된 참조 집합과 일치하는 투명하고 검사 가능한 지표를 생성합니다.
- 지표 루프는 10개 항목의 고정 참조 집합과 일치하도록 훈련되며, 레이블 없는 출력에 대한 합의를 통해 정규화됩니다.
- Double Ratchet은 코드 생성(MBPP+), 기업용 텍스트에서 SQL로(Spider~2.0-Snow), 보고서 생성에 걸쳐 생명 주기 관리된 스킬 루프와 지표가 공동 진화합니다.
- 시스템은 지상 진실이나 사용 가능한 최고의 기준에 의해 구동되는 스킬 루프가 달성한 홀드아웃 리프트의 88--110%를 유지합니다.
- 안전성은 고정 규칙과 외부 감사, 그리고 보고서 생성 작업에서 조작된 기준을 잡아내는 독립적인 심판자를 통해 유지됩니다.
저자들은 이 실패를 예상하는 아키텍처가 신뢰할 수 있는 자동 검증자가 없는 애플리케이션에 적합한 기본값이라고 주장합니다.