Авторы представляют подход к инжинирингу каркасов, который трансформирует корпоративные прототипы LLM в отслеживаемые, проверяемые архитектуры путем переноса детерминированного поведения в код и артефакты валидации вокруг заменяемой границы композиции.

  • Система сохраняет контракты привязки к источнику, маршрутизации сущностей, трассировки, гигиены вывода и языка рекомендаций в рамках фиксированных сценариев валидации.
  • Валидаторы успешно выявляют намеренно нарушенные контракты в контрольных тестах с инъекцией ошибок.
  • Проверки обеспечения удержания выдержали проверку при замене модели, пройдя все 270 запусков границы композиции для трех размещенных моделей.
  • Гарантии, обеспечиваемые кодом, предотвращают нарушения, которые одни только инструкции промптов не могут заблокировать, такие как утечка внутренней трассировки.
  • В отличие от внешних оградительных механизмов, снижающих полезность до 88/120 из-за чрезмерного отказа, каркас сохраняет полную полезность (120/120) при обеспечении безопасности.

Этот повторно используемый инженерный паттерн позволяет разработчикам превращать исследовательские прототипы в проверяемые приложения с версионированными исходниками, контролем и артефактами валидации.