arXiv reaDer
アーティファクト低減と解像度向上の並列および直列統合による圧縮画像の超解像
Super-resolving Compressed Images via Parallel and Series Integration of Artifact Reduction and Resolution Enhancement
ソーシャル メディア プラットフォームで写真を共有するなどの実際のアプリケーションでは、画像は常にサブサンプリングされるだけでなく、大幅に圧縮されるため、多くの場合、さまざまなアーティファクトが含まれます。このような画像の解像度を高める単純な方法は、アーティファクトを悪化させ、視覚的に好ましくないものにします。その高い実用的価値にもかかわらず、超解像圧縮画像は文献では十分に研究されていません。この論文では、アーティファクト除去と解像度向上の並列および直列統合に基づく、新しい圧縮画像超解像度(CISR)フレームワークを提案します。ダウンサンプリングおよび圧縮された観測からクリーンな低解像度 (LR) 画像とクリーンな高解像度 (HR) 画像を推定するための数学的推論モデルに基づいて、2 つのディープ ニューラル ネットワーク モジュールで構成される CISR アーキテクチャを設計しました。アーティファクト除去モジュール (ARM) と解像度向上モジュール (REM)。 ARM と REM は、両方とも圧縮された LR イメージを入力として並行して動作し、同時に、REM が ARM の出力を入力の 1 つとして取得し、ARM がその出力を取得することで直列に動作します。他の入力としてREM。圧縮アーティファクトを再帰的に抑制し、画像の解像度を復元するために、展開と呼ばれる手法が導入されています。当社の CISR システムのユニークな機能は、ARM と REM の間の並列接続と直列接続を活用し、再帰的な最適化を利用して、特定のタイプの劣化に対するモデルの依存を減らし、単一のモデルをトレーニングして画像を超解像することを可能にすることです。さまざまな方法でさまざまな品質に圧縮されます。コードとデータセットは https://github.com/luohongming/CISR_PSI.git で入手できます
In real-world applications, such as sharing photos on social media platforms, images are always not only sub-sampled but also heavily compressed thus often containing various artefacts. Simple methods for enhancing the resolution of such images will exacerbate the artefacts, rendering them visually objectionable. In spite of its high practical values, super-resolving compressed images is not well studied in the literature. In this paper, we propose a novel compressed image super resolution (CISR) framework based on parallel and series integration of artefacts removal and resolution enhancement. Based on a mathematical inference model for estimating a clean low-resolution (LR) image and a clean high-resolution (HR) image from a down-sampled and compressed observation, we have designed a CISR architecture consisting of two deep neural network modules: the artefacts removal module (ARM) and the resolution enhancement module (REM). The ARM and the REM work in parallel with both taking the compressed LR image as their inputs, at the same time they also work in series with the REM taking the output of the ARM as one of its inputs and the ARM taking the output of the REM as its other input. A technique called unfolding is introduced to recursively suppress the compression artefacts and restore the image resolution. A unique feature of our CISR system is that it exploits the parallel and series connections between the ARM and the REM, and recursive optimization to reduce the model's dependency on specific types of degradation thus making it possible to train a single model to super-resolve images compressed by different methods to different qualities. Codes and datasets are available at https://github.com/luohongming/CISR_PSI.git
updated: Tue Nov 22 2022 03:05:53 GMT+0000 (UTC)
published: Tue Mar 02 2021 13:04:28 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト