Хунг Тран, магистрант Университета информационных технологий (VNU-HCM), опубликовал код и данные к своей статье «Ловушка клиппинга: скрытый режим отказа в переобученных нейронных кодеках изображений». Работа демонстрирует, как переобученные кодеки, такие как Cool-chic и C3, могут генерировать изображения с плоскими цветами и нулевыми градиентами искажения для определённых типов контента.

  • Переобученные кодеки ограничивают выход декодера внутри дифференцируемого цикла, из-за чего градиент искажения становится ровно нулём на ярких фотографиях с низкой контрастностью и контенте экрана.
  • Энкодер снижает битрейт без возникновения ошибки, в результате чего выходные данные получают по PSNR, SSIM, MS-SSIM и LPIPS оценки не выше, чем у постоянного изображения.
  • Прямой оценщик (straight-through estimator) устраняет этот отказ при влиянии на BD-rate не более 0.1% на наборе данных Kodak, сохраняя битстрим идентичным для неизменённых декодеров.

Автор ищет одобрение arXiv cs.CV (код KGU7X3) и приветствует отзывы или критику по статье.