近年、720p (HD)、1080p (FHD)、および 4K (UHD) 解像度のビデオと画像は、テレビ、携帯電話、VR などのディスプレイ デバイスでより一般的になっています。ただし、これらの高解像度画像は、インターネット帯域幅の制限により期待される視覚効果を達成できず、超解像度ネットワークがリアルタイム パフォーマンスを達成するための大きな課題をもたらします。この課題に続いて、ピクセルアンシャッフル、リピートアップスケーリング、ローカルスキップ接続の削除など、複数の効率的なネットワーク設計を調査し、高速で軽量な超解像度ネットワークを提案します。さらに、超解像における分割統治の考え方の応用を分析することにより、入力の特徴に応じて畳み込みカーネルを適応させることができる組み立てられた畳み込みを提案します。実験は、私たちの方法がすべての最先端の効率的な超解像モデルよりも優れており、実行時間と品質の点で最適な結果を達成することを示唆しています。また、NTIRE 2023 Real-Time Super-Resolution - Track 1 (×2) で 1 位を獲得しました。コードは https://gitee.com/mindspore/models/tree/master/research/cv/AsConvSR で入手できます。
In recent years, videos and images in 720p (HD), 1080p (FHD) and 4K (UHD) resolution have become more popular for display devices such as TVs, mobile phones and VR. However, these high resolution images cannot achieve the expected visual effect due to the limitation of the internet bandwidth, and bring a great challenge for super-resolution networks to achieve real-time performance. Following this challenge, we explore multiple efficient network designs, such as pixel-unshuffle, repeat upscaling, and local skip connection removal, and propose a fast and lightweight super-resolution network. Furthermore, by analyzing the applications of the idea of divide-and-conquer in super-resolution, we propose assembled convolutions which can adapt convolution kernels according to the input features. Experiments suggest that our method outperforms all the state-of-the-art efficient super-resolution models, and achieves optimal results in terms of runtime and quality. In addition, our method also wins the first place in NTIRE 2023 Real-Time Super-Resolution - Track 1 (×2). The code will be available at https://gitee.com/mindspore/models/tree/master/research/cv/AsConvSR