ゼロフォースキャップを持つ Gemma 4 のベースライントレースは、モデルが反復の井戸に入る前に失敗の自己報告を生成する持続的な幻覚ループを明らかにします。テレメトリは、ロールタグのリークや "STOPITSTOP" などのフレーズがこの不安定な状態内で発生し、2025年12月以来 Llama および Gemma 3 ローダーで観察されたパターンと一致することを確認しています。

  • モデルはロジックに従うのではなくテキストパターンを繰り返す不安定な状態に入ります。
  • デコードストリームに自己報告の区間が現れ、「幻覚ループ」を診断します。
  • アトラクターはターンエンドを提供せずに継続し、反復トークンにロックされます。
  • この事象は Niodoo デコードパス上の他のモデルの以前のログと一致します。

記事では、ステアリングフォースが単にループの wording を変更するのではなくループ出口を移動できるかどうかを決定するために、流体力学群とヤコビアンレンズの実験を使用することを提案しています。