arXiv reaDer
Investigating Task-driven Latent Feasibility for Nonconvex Image Modeling
潜像分布を適切にモデル化することは、さまざまな画像関連の視覚問題において重要な役割を果たします。ほとんどの既存のアプローチは、手作りの事前分布を持つ最適化モデル(最大A事後、MAPなど)としてこの問題を定式化することを目的としています。近年では、さまざまなCNNモジュールも、画像モデリングプロセスを正規化するための深い優先事項と見なされています。ただし、これらの明示的な正則化手法には、問題に対する深い理解と、手の込んだ数学的なスキルが必要です。この作業では、最適化ベースのイメージモデリング問題のソリューションスペースを絞り込むために特定のタスク情報を組み込むために、タスク駆動型潜在実現可能性(TLF)という新しいパースペクティブを提供します。 TLFの柔軟性により、設計された制約とトレーニングされた制約の両方を最適化プロセスに組み込むことができます。単調性と有界性条件に基づく制御メカニズムを導入することにより、提案された推論プロセスの収束を厳密に証明することもできます。画像のブレ除去や雨の筋の除去など、さまざまな種類の画像モデリングの問題はすべて、TLFフレームワーク内で適切に対処できることを示しています。また、広範な実験により理論結果が検証され、既存の最先端のアプローチに対する当社の方法の利点が示されます。
Properly modeling latent image distributions plays an important role in a variety of image-related vision problems. Most exiting approaches aim to formulate this problem as optimization models (e.g., Maximum A Posterior, MAP) with handcrafted priors. In recent years, different CNN modules are also considered as deep priors to regularize the image modeling process. However, these explicit regularization techniques require deep understandings on the problem and elaborately mathematical skills. In this work, we provide a new perspective, named Task-driven Latent Feasibility (TLF), to incorporate specific task information to narrow down the solution space for the optimization-based image modeling problem. Thanks to the flexibility of TLF, both designed and trained constraints can be embedded into the optimization process. By introducing control mechanisms based on the monotonicity and boundedness conditions, we can also strictly prove the convergence of our proposed inference process. We demonstrate that different types of image modeling problems, such as image deblurring and rain streaks removals, can all be appropriately addressed within our TLF framework. Extensive experiments also verify the theoretical results and show the advantages of our method against existing state-of-the-art approaches.
updated: Thu Jul 02 2020 02:52:51 GMT+0000 (UTC)
published: Fri Oct 18 2019 03:36:00 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト