ピクセル置換を介してディープニューラルネットワークに画像形成の制約を課す、シンプルで効果的な画像超解像アルゴリズムを紹介します。提案されたアルゴリズムは、最初にディープニューラルネットワークを使用して中間の高解像度画像を推定し、既知のぼかしカーネルを使用して中間画像をぼかし、次に、デシメーションされていない位置のピクセルの値を低解像度の対応するピクセルの値で置き換えます画像。ピクセル置換プロセスの出力は、画像形成モデルを厳密に満たし、同じディープニューラルネットワークによってカスケード方式でさらに改良されます。提案されたフレームワークは、エンドツーエンドの方法でトレーニングされ、超解像のために既存のフィードフォワードディープニューラルネットワークと連携して、実際には高速に収束できます。広範な実験結果は、提案されたアルゴリズムが最先端の方法に対して有利に機能することを示しています。
We present a simple and effective image super-resolution algorithm that imposes an image formation constraint on the deep neural networks via pixel substitution. The proposed algorithm first uses a deep neural network to estimate intermediate high-resolution images, blurs the intermediate images using known blur kernels, and then substitutes values of the pixels at the un-decimated positions with those of the corresponding pixels from the low-resolution images. The output of the pixel substitution process strictly satisfies the image formation model and is further refined by the same deep neural network in a cascaded manner. The proposed framework is trained in an end-to-end fashion and can work with existing feed-forward deep neural networks for super-resolution and converges fast in practice. Extensive experimental results show that the proposed algorithm performs favorably against state-of-the-art methods.