저자들은 결정론적 동작을 코드와 교체 가능한 구성 경계 주변의 검증 아티팩트로 이동시켜, 엔터프라이즈 LLM 프로토타입을 추적 가능하고 감사 가능한 아키텍처로 전환하는 하니스 엔지니어링 접근 방식을 제시합니다.
- 시스템은 고정된 검증 시나리오 전반에 걸쳐 소스 기반화, 엔티티 라우팅, 추적, 출력 위생 및 추천 언어 계약을 유지합니다.
- 검증기는 결함 주입 제어에서 의도적으로 위반된 계약을 성공적으로 식별합니다.
- 모델 치환 하에서 실행된 강제 검사들은 세 가지 호스팅된 모델에 걸쳐 270개의 구성 경계 실행을 모두 통과했습니다.
- 코드 기반의 보장은 내부 추적 유출과 같이 프롬프트 지시문만으로는 차단할 수 없는 위반을 방지합니다.
- 과잉 거절로 인해 유틸리티가 88/120로 떨어지는 외부 가드레일과는 달리, 하니스는 안전성을 유지하면서 전체 유틸리티(120/120)를 보존합니다.
이 재사용 가능한 엔지니어링 패턴은 개발자가 탐색형 프로토타입을 버전 관리된 소스, 제어 및 검증 아티팩트를 갖춘 감사 가능한 애플리케이션으로 전환할 수 있게 합니다.