圧縮画像 超解像は近年大きな注目を集めており、圧縮アーティファクトや低解像度アーティファクトによって画像が劣化します。複雑なハイブリッド歪みであるため、超解像と圧縮アーティファクトの除去を単純に連携させて歪んだ画像を復元することは困難です。この論文では、階層的特徴表現を共同でキャプチャし、Swin Transformer を使用して各スケール表現をそれぞれ強化する、低解像度の圧縮画像を復元するための Hierarchical Swin Transformer (HST) ネットワークを提案するために一歩前進します。さらに、超解像(SR)タスクを使用した事前トレーニングは、圧縮画像の超解像に不可欠であることがわかりました。さまざまな SR 事前トレーニングの効果を調べるために、一般的に使用される SR タスク (バイキュービックおよびさまざまな実超解像シミュレーションなど) を事前トレーニング タスクとして使用し、圧縮画像の超解像において SR がかけがえのない役割を果たすことを明らかにします。 HST と事前トレーニングの協力により、当社の HST は 23.51dB の PSNR で、低品質の圧縮画像超解像トラックで AIM 2022 チャレンジで 5 位を達成しました。広範な実験とアブレーション研究により、提案された方法の有効性が検証されました。
Compressed Image Super-resolution has achieved great attention in recent years, where images are degraded with compression artifacts and low-resolution artifacts. Since the complex hybrid distortions, it is hard to restore the distorted image with the simple cooperation of super-resolution and compression artifacts removing. In this paper, we take a step forward to propose the Hierarchical Swin Transformer (HST) network to restore the low-resolution compressed image, which jointly captures the hierarchical feature representations and enhances each-scale representation with Swin transformer, respectively. Moreover, we find that the pretraining with Super-resolution (SR) task is vital in compressed image super-resolution. To explore the effects of different SR pretraining, we take the commonly-used SR tasks (e.g., bicubic and different real super-resolution simulations) as our pretraining tasks, and reveal that SR plays an irreplaceable role in the compressed image super-resolution. With the cooperation of HST and pre-training, our HST achieves the fifth place in AIM 2022 challenge on the low-quality compressed image super-resolution track, with the PSNR of 23.51dB. Extensive experiments and ablation studies have validated the effectiveness of our proposed methods.