VNU-HCM 정보기술대학원 석사 과정 학생인 Hung Tran은 "The Clipping Trap: A Silent Failure Mode in Overfitted Neural Image Codecs"라는 논문의 코드와 데이터를 공개했습니다. 이 연구는 Cool-chic 및 C3와 같은 과적합된 코덱이 특정 콘텐츠 유형에서 왜곡 기울기가 0인 평탄한 색상의 이미지를 생성할 수 있는 방법을 강조합니다.
- 과적합된 코덱은 미분 가능한 루프 내부에서 디코더 출력을 클램핑하여, 밝고 대비가 낮은 사진 및 화면 콘텐츠에서 왜곡 기울기를 정확히 0으로 만듭니다.
- 인코더는 오류를 발생시키지 않고 비트율을 낮추므로, PSNR, SSIM, MS-SSIM 및 LPIPS 점수가 상수 이미지보다 높지 않은 출력이 생성됩니다.
- Straight-through estimator는 수정되지 않은 디코더와의 비트스트림 호환성을 유지하면서 Kodak 데이터셋에서 BD-rate 영향을 ≤0.1%로 줄여 이 실패를 해결합니다.
저자는 arXiv cs.CV의 추천인(code KGU7X3)을 구하고 있으며, 논문에 대한 피드백이나 비판을 환영합니다.