著者らは、決定論的な振る舞いをコードに移行し、交換可能な構成境界の周りに検証アーティファクトを配置することで、エンタープライズLLMのプロトタイプを追跡可能で監査可能なアーキテクチャに変換するハーネスエンジニアリングのアプローチを提示している。

  • システムは、固定された検証シナリオにわたって、ソースグラウンディング、エンティティルーティング、トレース、出力のクリーンアップ、および推奨言語契約を維持する。
  • バリデータは、フォールトインジェクション制御において意図的に破られた契約を正常に検出する。
  • モデル置換下で適用される強制チェックは、3つのホストモデルにわたる270回の構成境界ランのすべてを通過した。
  • コードが所有する保証により、プロンプト指示だけではブロックできない内部トレースの漏洩などの違反を防ぐ。
  • 過剰な拒否によりユーティリティが88/120に低下する外部ガードレールとは異なり、このハーネスは安全性を維持しつつ完全なユーティリティ(120/120)を保持する。

この再利用可能なエンジニアリングパターンにより、開発者は探索的なプロトタイプをバージョン管理されたソース、制御、および検証アーティファクトを持つ監査可能なアプリケーションに変換できる。