arXiv reaDer
ハードウェアベースの適応劣化モデルによる実世界の画像超解像に向けて
Toward Real-world Image Super-resolution via Hardware-based Adaptive Degradation Models
ほとんどの単一画像超解像(SR)メソッドは、合成低解像度(LR)と高解像度(HR)の画像ペアで開発され、バイキュービックダウンサンプリングなどの所定の劣化操作によってシミュレートされます。ただし、これらの方法は、事前に決定された操作の逆プロセスのみを学習するため、実際のLR画像を超解像することはできません。真の定式化は、所定の操作から逸脱します。この問題に対処するために、イメージングシステムの事前のハードウェア知識を含めて、未知の劣化プロセスをシミュレートする新しい教師あり方法を提案します。教師あり学習フレームワークで適応ブラーレイヤー(ABL)を設計して、ターゲットLR画像を推定します。 ABLのハイパーパラメータは、さまざまなイメージングハードウェアに合わせて調整できます。実世界のデータセットでの実験は、劣化モデルが所定の劣化操作よりも正確にLR画像を推定できること、および既存のSRメソッドが従来のアプローチよりも正確に実世界のLR画像の再構成を実行できることを検証します。
Most single image super-resolution (SR) methods are developed on synthetic low-resolution (LR) and high-resolution (HR) image pairs, which are simulated by a predetermined degradation operation, e.g., bicubic downsampling. However, these methods only learn the inverse process of the predetermined operation, so they fail to super resolve the real-world LR images; the true formulation deviates from the predetermined operation. To address this problem, we propose a novel supervised method to simulate an unknown degradation process with the inclusion of the prior hardware knowledge of the imaging system. We design an adaptive blurring layer (ABL) in the supervised learning framework to estimate the target LR images. The hyperparameters of the ABL can be adjusted for different imaging hardware. The experiments on the real-world datasets validate that our degradation model can estimate LR images more accurately than the predetermined degradation operation, as well as facilitate existing SR methods to perform reconstructions on real-world LR images more accurately than the conventional approaches.
updated: Wed Oct 20 2021 19:53:48 GMT+0000 (UTC)
published: Wed Oct 20 2021 19:53:48 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト