この論文は、深い生成ニューラルネットワークを用いて、イメージングにおける逆問題(例えば、ぼけ除去または修復)を正則化する新しい方法を提案します。生成モデルがデータに適しているとすぐに、同じネットワークを多くの異なる問題や実験条件に使用できるため、エンドツーエンドモデルと比較して、このようなアプローチは特に興味深いように思われます。以前の研究では、推定が潜在ベクトルに対して実行され、後でデコーダーを介して解が得られる合成フレームワークを使用することが提案されていました。代わりに、画像自体を直接最適化し、潜在ベクトルにペナルティを課す分析定式化を提案します。修復、ぼけ除去、超解像の実験を実行することにより、このような定式化の関心を説明します。多くの場合、私たちの手法はパフォーマンスの明らかな改善を達成し、特に初期化に関して、より堅牢であるように思われます。
This paper proposes a new way of regularizing an inverse problem in imaging (e.g., deblurring or inpainting) by means of a deep generative neural network. Compared to end-to-end models, such approaches seem particularly interesting since the same network can be used for many different problems and experimental conditions, as soon as the generative model is suited to the data. Previous works proposed to use a synthesis framework, where the estimation is performed on the latent vector, the solution being obtained afterwards via the decoder. Instead, we propose an analysis formulation where we directly optimize the image itself and penalize the latent vector. We illustrate the interest of such a formulation by running experiments of inpainting, deblurring and super-resolution. In many cases our technique achieves a clear improvement of the performance and seems to be more robust, in particular with respect to initialization.