arXiv reaDer
Super-resolving Compressed Images via Parallel and Series Integration of Artifact Reduction and Resolution Enhancement
この論文では、アーチファクトの除去と解像度の向上の並列および直列統合に基づく新しい圧縮画像超解像(CISR)フレームワークを提案します。ダウンサンプリングおよび圧縮された観測からクリーンな低解像度(LR)入力画像とクリーンな高解像度(HR)出力画像を推定するための最大事後推論に基づいて、2つのディープニューラルネットワークモジュールで構成されるCISRアーキテクチャを設計しました。アーティファクト削減モジュール(ARM)と解像度向上モジュール(REM)。 ARMとREMは、圧縮されたLRイメージを入力として取得すると同時に動作しますが、ARMの出力を入力の1つとして取得し、ARMがREMの出力を他の入力として取得するREMと直列に動作します。 CSIRシステムのユニークな特性は、単一のトレーニング済みモデルが、さまざまな方法でさまざまな品質に圧縮されたLR画像を超解像できることです。これは、画像の劣化を処理するためのディープニューラルネットワークの能力と、特定の劣化への依存を減らすためのARMとREM間の並列および直列接続を活用することによって実現されます。 ARMとREMは、ディープアンフォールディングテクニックによって同時にトレーニングされます。実験は、圧縮タイプと圧縮係数の事前知識がなくても、JPEGとWebPの圧縮画像の混合物で行われます。視覚的および定量的な比較は、最先端の超解像法に対する私たちの方法の優位性を示しています。コードリンク:
In this paper, we propose a novel compressed image super resolution (CISR) framework based on parallel and series integration of artifact removal and resolution enhancement. Based on maximum a posterior inference for estimating a clean low-resolution (LR) input image and a clean high resolution (HR) output image from down-sampled and compressed observations, we have designed a CISR architecture consisting of two deep neural network modules: the artifact reduction module (ARM) and resolution enhancement module (REM). ARM and REM work in parallel with both taking the compressed LR image as their inputs, while they also work in series with REM taking the output of ARM as one of its inputs and ARM taking the output of REM as its other input. A unique property of our CSIR system is that a single trained model is able to super-resolve LR images compressed by different methods to various qualities. This is achieved by exploiting deep neural net-works capacity for handling image degradations, and the parallel and series connections between ARM and REM to reduce the dependency on specific degradations. ARM and REM are trained simultaneously by the deep unfolding technique. Experiments are conducted on a mixture of JPEG and WebP compressed images without a priori knowledge of the compression type and com-pression factor. Visual and quantitative comparisons demonstrate the superiority of our method over state-of-the-art super resolu-tion methods.Code link:
updated: Wed Apr 14 2021 09:47:20 GMT+0000 (UTC)
published: Tue Mar 02 2021 13:04:28 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト