arXiv reaDer
Invertible generative models for inverse problems: mitigating representation error and dataset bias
訓練された生成モデルは、イメージングの逆問題の事前として顕著なパフォーマンスを示しています。たとえば、生成敵対ネットワークの事前は、スパース事前よりも5〜10倍少ない測定からテスト画像を回復できます。残念ながら、これらのモデルは、アーキテクチャの選択、モードの崩壊、トレーニングデータセットのバイアスのため、特定の画像を表現できない場合があります。この論文では、設計により表現誤差がゼロである可逆ニューラルネットワークが、ノイズ除去、圧縮センシング、修復などの逆問題で有効な自然信号の事前分布になり得ることを示します。訓練された生成モデルが与えられると、ペナルティ化によって直接または初期化によってアルゴリズム的に高尤度画像を促進する正則化の下で、望ましい逆問題の経験的リスク定式化を研究します。圧縮センシングの場合、反転可能な事前分布は、ほとんどすべてのアンダーサンプリング比にわたってスパース性の事前分布よりも高い精度をもたらす可能性があり、表現誤差がないため、バイアスされたトレーニングセット内の変動の珍しい特徴を持つ画像について、可逆的な事前分布はGAN事前分布よりも優れた再構成をもたらす可能性があります。 、配信外の自然画像を含みます。さらに、圧縮センシングのパフォーマンスをディープデコーダーなどの学習されていない方法と比較し、線形可逆モデルの場合の予想されるリカバリエラーの理論上の限界を確立します。
Trained generative models have shown remarkable performance as priors for inverse problems in imaging -- for example, Generative Adversarial Network priors permit recovery of test images from 5-10x fewer measurements than sparsity priors. Unfortunately, these models may be unable to represent any particular image because of architectural choices, mode collapse, and bias in the training dataset. In this paper, we demonstrate that invertible neural networks, which have zero representation error by design, can be effective natural signal priors at inverse problems such as denoising, compressive sensing, and inpainting. Given a trained generative model, we study the empirical risk formulation of the desired inverse problem under a regularization that promotes high likelihood images, either directly by penalization or algorithmically by initialization. For compressive sensing, invertible priors can yield higher accuracy than sparsity priors across almost all undersampling ratios, and due to their lack of representation error, invertible priors can yield better reconstructions than GAN priors for images that have rare features of variation within the biased training set, including out-of-distribution natural images. We additionally compare performance for compressive sensing to unlearned methods, such as the deep decoder, and we establish theoretical bounds on expected recovery error in the case of a linear invertible model.
updated: Sun Jul 12 2020 22:27:29 GMT+0000 (UTC)
published: Tue May 28 2019 08:27:53 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト