本記事では、反復的な標準作業手順（SOP）ステップに対して、推論時のコード再生成に代わって事前コンパイルされた検証済みツールを使用するエージェント型ツール作成パイプラインを紹介します。このアプローチは、実行トレースの収集とデプロイメント前のラベル付きケースに対する候補ツールの修復により、合成をライブ環境に根ざさせます。

  • システムは、リクエストごとにコードを再生成しないよう、反復的なSOPステップをバージョン管理されたツールにコンパイルします。
  • 配送センターの警報トリアージシステムでは、ツール呼び出しによりp50レイテンシが42%削減されました。
  • ラン間の変動を抑制することで、1,500件の歴史的警報においてエンドツーエンドのエラー率が最大53%削減されました。
  • 制御されたアブレーションにより、コンパクトな構造化判定を返すことで、p50レイテンシがさらに62%削減されることが示されました。

著者らは、自己進化型エージェントが産業用LLMシステムをより高速で信頼性が高く運用しやすくすると同時に、監査可能性を向上させると主張しています。