VNU-HCM(ホーチミン市情報技術大学)の修士課程学生であるHung Tran氏は、論文「The Clipping Trap: A Silent Failure Mode in Overfitted Neural Image Codecs」のコードとデータを公開した。この研究は、Cool-chicやC3のような過学習コーデックが、特定のコンテンツタイプにおいて歪み勾配がゼロの平坦な色画像を生成する仕組みを浮き彫りにしている。
- 過学習コーデックは微分可能なループ内でデコーダの出力をクランプするため、明るい低コントラストの写真や画面コンテンツにおいて歪み勾配が正確にゼロになる。
- エンコーダはエラーを発生させずにレートを抑えるため、PSNR、SSIM、MS-SSIM、LPIPSのスコアが一定画像よりも高くなることはない出力が生じる。
- ストレートスルー推定子により、KodakデータセットにおいてBDレートへの影響が≤0.1%に抑えられつつ、未変更のデコーダに対してビットストリームを同一に保ちながらこの失敗を解消できる。
著者はarXiv cs.CVの推薦(コード KGU7X3)を求めている。論文に対するフィードバックや批判を歓迎する。