저자는 모델 독립적인 DESi 인식론적 거버넌스 프레임워크의 실용적인 적용 사례로, 설치 가능한 Claude 스킬로 패키징된 DESi Review를 출시했습니다. 이 도구는 결정론적 주장 추출과 모델 기반 심판을 분리하여 영어 텍스트에 대해 구조화된 논문 검토 파이프라인을 실행합니다.
- 시스템은 주장을 표준 원장에 추출하고 Claude를 사용하여 SUPPORTED, OVERSTATED, UNSUPPORTED, NOT_A_CLAIM이라는 네 가지 결론에 따라 이를 평가합니다.
- 결정론적 레이어는 자체적으로 모델 호출을 수행하지 않으면서도 스키마 준수, 해싱 및 재생 안정 상태를 보장합니다.
- 설치를 위해서는 유료 Claude 플랜, 코드 실행 활성화, 그리고 공개 저장소를 복제하기 위한 네트워크 접근이 필요합니다.
- 저자는 주장 감지 및 감사 가능성의 차이를 측정하기 위해 DESi Review를 일반 LLM 프롬프트와 비교하는 A/B 테스트를 제안합니다.
이 프로젝트는 결정론적 레이어가 구조를 제어하지만 의미론적 판단을 불실수하게 만들지는 않는다는 점을 인정하면서, 명시적인 인식론적 아키텍처 변경이 표준 프롬프팅과 비교하여 검토 결과에 영향을 미치는지 여부를 규명하는 것을 목표로 합니다.