Hung Tran, étudiant en master à l'Université des technologies de l'information (VNU-HCM), a publié le code et les données de son article « The Clipping Trap: A Silent Failure Mode in Overfitted Neural Image Codecs. » Ce travail met en évidence comment les codecs surajustés tels que Cool-chic et C3 peuvent produire des images à couleurs uniformes avec des gradients de distorsion nuls pour certains types de contenu.

  • Les codecs surajustés bornent la sortie du décodeur à l'intérieur de la bouille différenciable, ce qui fait que le gradient de distorsion devient exactement nul sur les photos lumineuses à faible contraste et le contenu d'écran.
  • L'encodeur réduit le débit sans générer d'erreur, produisant des sorties dont les scores PSNR, SSIM, MS-SSIM et LPIPS ne dépassent pas ceux d'une image constante.
  • Un estimateur de type « straight-through » supprime ce dysfonctionnement avec un impact sur le BD-rate inférieur ou égal à 0,1 % sur l'ensemble de données Kodak, tout en conservant le flux binaire identique pour les décodeurs non modifiés.

L'auteur sollicite une recommandation arXiv cs.CV (code KGU7X3) et accueille les retours ou critiques sur cet article.