arXiv reaDer
RAW画像のブレ除去
Raw Image Deblurring
ディープラーニングベースのブラインド画像のぼけ除去は、既存のすべてのカーネルが実世界のぼけのモデリングに制限されているため、画像のぼけを解決する上で重要な役割を果たします。これまでのところ、研究者は、ぼけ除去の問題を処理し、まともな結果を達成するための強力なモデルに焦点を当てています。この作業では、新しい側面で、RAW画像から直接画像強調(たとえば、ぼけ除去)の絶好の機会を発見し、RAWベースの学習に役立つ新しいニューラルネットワーク構造を調査します。ただし、私たちの知る限り、利用可能なRAW画像のブレ除去データセットはありません。そのため、RAW画像と処理済みsRGB画像の両方を含む新しいデータセットを構築し、RAW画像の固有の特性を利用する新しいモデルを設計しました。 RAW画像のみからトレーニングされた、提案されたブレ除去モデルは、最先端のパフォーマンスを実現し、処理されたsRGB画像でトレーニングされたモデルを上回ります。さらに、微調整により、新しいデータセットでトレーニングされた提案モデルを他のセンサーに一般化できます。さらに、一連の実験により、新しいデータセットのRAW画像でトレーニングすることにより、既存のブレ除去モデルも改善できることを示します。最終的に、私たちは、考案された新しいrawベースのぼけ除去方法とまったく新しいDeblur-RAWデータセットに基づいて、さらなる機会のための新しい場所を示します。
Deep learning-based blind image deblurring plays an essential role in solving image blur since all existing kernels are limited in modeling the real world blur. Thus far, researchers focus on powerful models to handle the deblurring problem and achieve decent results. For this work, in a new aspect, we discover the great opportunity for image enhancement (e.g., deblurring) directly from RAW images and investigate novel neural network structures benefiting RAW-based learning. However, to the best of our knowledge, there is no available RAW image deblurring dataset. Therefore, we built a new dataset containing both RAW images and processed sRGB images and design a new model to utilize the unique characteristics of RAW images. The proposed deblurring model, trained solely from RAW images, achieves the state-of-art performance and outweighs those trained on processed sRGB images. Furthermore, with fine-tuning, the proposed model, trained on our new dataset, can generalize to other sensors. Additionally, by a series of experiments, we demonstrate that existing deblurring models can also be improved by training on the RAW images in our new dataset. Ultimately, we show a new venue for further opportunities based on the devised novel raw-based deblurring method and the brand-new Deblur-RAW dataset.
updated: Tue Dec 08 2020 08:03:09 GMT+0000 (UTC)
published: Tue Dec 08 2020 08:03:09 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト