arXiv reaDer
Neural Blind Deconvolution Using Deep Priors
 ブラインドデコンボリューションは、多くの実際のアプリケーションで使用される古典的でありながら挑戦的な低レベルの視覚問題です。従来の最大事後(MAP)ベースの方法は、きれいな画像とぼやけたカーネルの特性を明らかにするには不十分である固定および手作りの事前に大きく依存しており、通常、些細な解決策を避けるために特別に設計された交互最小化を採用しています。対照的に、既存のディープモーションブラー除去ネットワークは、大量のトレーニング画像からクリーンイメージまたはブラーカーネルへのマッピングを学習しますが、さまざまな複雑で大きなサイズのブラーカーネルの処理に制限があります。 MAPモデルとディープモデルを接続するために、本稿では、クリーンイメージとブラーカーネルのディーププライアーをそれぞれモデリングするための2つの生成ネットワークを提示し、ブラインドデコンボリューションに対する制約のないニューラル最適化ソリューションを提案します。特に、きれいな潜像を生成するためのスキップ接続を備えた非対称Autoencoderと、ぼかしカーネルを生成するための完全接続ネットワーク(FCN)を採用しています。さらに、SoftMax非線形性がFCNの出力層に適用され、非負および等式制約を満たします。ニューラル最適化のプロセスは、生成ネットワークの一種の「ゼロショット」自己監視学習として説明できるため、提案された方法はSelfDeblurと呼ばれます。実験結果は、ベンチマークデータセットと現実世界のぼやけた画像での最先端のブラインドデコンボリューション法と比較して、SelfDeblurが顕著な定量的ゲインと、より視覚的にもっともらしいボケ除去結果を達成できることを示しています。ソースコードはで入手できます。
Blind deconvolution is a classical yet challenging low-level vision problem with many real-world applications. Traditional maximum a posterior (MAP) based methods rely heavily on fixed and handcrafted priors that certainly are insufficient in characterizing clean images and blur kernels, and usually adopt specially designed alternating minimization to avoid trivial solution. In contrast, existing deep motion deblurring networks learn from massive training images the mapping to clean image or blur kernel, but are limited in handling various complex and large size blur kernels. To connect MAP and deep models, we in this paper present two generative networks for respectively modeling the deep priors of clean image and blur kernel, and propose an unconstrained neural optimization solution to blind deconvolution. In particular, we adopt an asymmetric Autoencoder with skip connections for generating latent clean image, and a fully-connected network (FCN) for generating blur kernel. Moreover, the SoftMax nonlinearity is applied to the output layer of FCN to meet the non-negative and equality constraints. The process of neural optimization can be explained as a kind of "zero-shot" self-supervised learning of the generative networks, and thus our proposed method is dubbed SelfDeblur. Experimental results show that our SelfDeblur can achieve notable quantitative gains as well as more visually plausible deblurring results in comparison to state-of-the-art blind deconvolution methods on benchmark datasets and real-world blurry images. The source code is available at
updated: Wed Mar 18 2020 04:40:36 GMT+0000 (UTC)
published: Tue Aug 06 2019 15:03:44 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト