本研究は、基礎となる離散状態空間の構築を通じて離散ノイズ除去拡散モデル(DDMs)を捉える、離散ノイズ除去拡散モデル(DDMs)のための統一された概念的枠組みを導入する。遷移行列、マスキング/吸収状態、スコア/比ベースのアプローチを含む既存の定式化が、共通の設計空間における異なるインスタンス化としてどのように現れるかを示す。

  • この枠組みは、DDMs が本質的にトークン化スキーム、語彙トポロジー、およびドメイン固有の構造アルファベットによって形成される方法を浮き彫りにする。
  • 訓練目的関数、推論アルゴリズム、スケーリング動作、システム最適化、評価プロトコルにわたる共通の設計トレードオフを明らかにする。
  • 著者は、これらの浮き彫りにされたトレードオフに基づき、将来の研究に向けたいくつかの有望な方向性を提案している。