画像の焦点ぼけは、レンズの光学収差によって引き起こされる画像形成の物理学に固有のものであり、画像品質に関する豊富な情報を提供します。残念ながら、圧縮された画像に対する既存の品質向上アプローチは、焦点ぼけの固有の特性を無視しており、パフォーマンスが低下しています。この論文は、圧縮画像において、著しくデフォーカスされた領域がより良い圧縮品質を有し、異なるデフォーカス値を有する2つの領域が多様なテクスチャパターンを有することを発見した。これらの調査結果は、焦点ぼけを意識した品質向上 (DAQE) アプローチの動機となっています。具体的には、圧縮画像の領域ごとの焦点ぼけの違いを2つの側面で考慮する、DAQEアプローチの新しい動的領域ベースの深層学習アーキテクチャを提案します。 (1) DAQE アプローチでは、大幅に焦点が合っていない領域の品質を向上させるために使用する計算リソースが少なくなりますが、他の領域の品質を向上させるためにより多くのリソースが使用されます。 (2) DAQE アプローチは、テクスチャごとの 1 対 1 の強化を実現できるように、異なるデフォーカス値を持つ領域の多様なテクスチャ パターンを個別に強化することを学習します。広範な実験により、他の最先端のアプローチと比較して、品質の向上とリソースの節約という点で、DAQE アプローチの優位性が検証されています。
Image defocus is inherent in the physics of image formation caused by the optical aberration of lenses, providing plentiful information on image quality. Unfortunately, the existing quality enhancement approaches for compressed images neglect the inherent characteristic of defocus, resulting in inferior performance. This paper finds that in compressed images, the significantly defocused regions are with better compression quality and two regions with different defocus values possess diverse texture patterns. These findings motivate our defocus-aware quality enhancement (DAQE) approach. Specifically, we propose a novel dynamic region-based deep learning architecture of the DAQE approach, which considers the region-wise defocus difference of compressed images in two aspects. (1) The DAQE approach employs fewer computational resources to enhance the quality of significantly defocused regions, while more resources on enhancing the quality of other regions; (2) The DAQE approach learns to separately enhance diverse texture patterns for the regions with different defocus values, such that texture-wise one-on-one enhancement can be achieved. Extensive experiments validate the superiority of our DAQE approach in terms of quality enhancement and resource-saving, compared with other state-of-the-art approaches.