低解像度(LR)観測から高解像度(HR)画像を再構成することを目的とした単一画像超解像(SISR)は、ここ数十年で画像処理の分野で活発な研究トピックとなっています。特に、深層学習ベースの超解像(SR)アプローチは多くの注目を集めており、合成データの再構成パフォーマンスを大幅に向上させています。最近の研究によると、合成データのシミュレーション結果は通常、実世界の画像を超解像する能力を過大評価しています。これに関連して、ますます多くの研究者がリアルな画像のためのSRアプローチの開発に専念しています。この記事は、実際の単一画像の超解像(RSISR)に関する包括的なレビューを行うことを目的としています。より具体的には、このレビューでは、RSISRの重要な公開データセットと評価指標、およびRSISRメソッドの4つの主要なカテゴリ、つまり、劣化モデリングベースのRSISR、画像ペアベースのRSISR、ドメイン変換ベースのRSISR、および自己学習について説明します。ベースのRSISR。再構成の品質と計算効率の両方の観点から、ベンチマークデータセットの代表的なRSISRメソッド間でも比較が行われます。さらに、RSISRに関する課題と有望な研究トピックについて説明します。
Single image super-resolution (SISR), which aims to reconstruct a high-resolution (HR) image from a low-resolution (LR) observation, has been an active research topic in the area of image processing in recent decades. Particularly, deep learning-based super-resolution (SR) approaches have drawn much attention and have greatly improved the reconstruction performance on synthetic data. Recent studies show that simulation results on synthetic data usually overestimate the capacity to super-resolve real-world images. In this context, more and more researchers devote themselves to develop SR approaches for realistic images. This article aims to make a comprehensive review on real-world single image super-resolution (RSISR). More specifically, this review covers the critical publically available datasets and assessment metrics for RSISR, and four major categories of RSISR methods, namely the degradation modeling-based RSISR, image pairs-based RSISR, domain translation-based RSISR, and self-learning-based RSISR. Comparisons are also made among representative RSISR methods on benchmark datasets, in terms of both reconstruction quality and computational efficiency. Besides, we discuss challenges and promising research topics on RSISR.