arXiv reaDer
Noisy-As-Clean: Learning Self-supervised Denoising from the Corrupted Image
 監視付きディープネットワークは、ノイズの多いクリーンな画像の多くのペアで画像の事前情報とノイズ統計を学習することにより、画像のノイズ除去で有望なパフォーマンスを実現しています。教師なしノイズ除去ネットワークは、ノイズの多い画像のみでトレーニングされます。ただし、目に見えない破損した画像の場合、監視ありネットワークと監視なしネットワークの両方で、前の特定の画像、ノイズ統計、またはその両方が無視されます。つまり、外部画像から学習したネットワークは、ドメインギャップの問題に本質的に悩まされています。画像の事前情報とノイズ統計は、トレーニング画像とテスト画像で大きく異なります。この問題は、信号に依存する現実的なノイズを処理するときに、より明確になります。この問題を回避するために、この作業では、自己監視ノイズ除去ネットワークをトレーニングする新しい "Noisy-As-Clean"(NAC)戦略を提案します。具体的には、破損したテストイメージは直接「クリーン」ターゲットとして扱われますが、入力は、この破損したイメージと2番目の類似した破損で構成される合成イメージです。 NACに関する単純ですが有用な観察結果は次のとおりです。ノイズが弱い限り、破損した画像のみを使用して自己監視ネットワークを学習し、ノイズのあるクリーンな画像のペアで学習した監視ネットワークの最適パラメーターを近似することができます。 。合成および現実的なノイズ除去の実験は、自己監視NAC戦略でトレーニングされたDnCNNおよびResNetネットワークが、元のネットワークおよび以前の監視/非監視/自己監視ネットワークと同等またはそれ以上のパフォーマンスを達成することを示しています。コードはで公開されています。
Supervised deep networks have achieved promisingperformance on image denoising, by learning image priors andnoise statistics on plenty pairs of noisy and clean images. Unsupervised denoising networks are trained with only noisy images. However, for an unseen corrupted image, both supervised andunsupervised networks ignore either its particular image prior, the noise statistics, or both. That is, the networks learned from external images inherently suffer from a domain gap problem: the image priors and noise statistics are very different between the training and test images. This problem becomes more clear when dealing with the signal dependent realistic noise. To circumvent this problem, in this work, we propose a novel "Noisy-As-Clean" (NAC) strategy of training self-supervised denoising networks. Specifically, the corrupted test image is directly taken as the "clean" target, while the inputs are synthetic images consisted of this corrupted image and a second and similar corruption. A simple but useful observation on our NAC is: as long as the noise is weak, it is feasible to learn a self-supervised network only with the corrupted image, approximating the optimal parameters of a supervised network learned with pairs of noisy and clean images. Experiments on synthetic and realistic noise removal demonstrate that, the DnCNN and ResNet networks trained with our self-supervised NAC strategy achieve comparable or better performance than the original ones and previous supervised/unsupervised/self-supervised networks. The code is publicly available at
updated: Sat May 09 2020 09:04:17 GMT+0000 (UTC)
published: Mon Jun 17 2019 07:39:00 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト