arXiv reaDer
Noise2Sim-画像のノイズ除去のための類似性ベースの自己学習
Noise2Sim -- Similarity-based Self-Learning for Image Denoising
画像のノイズ除去で最高のパフォーマンスを発揮しますが、教師ありの深いノイズ除去方法では、ノイズクリーンデータのペアが必要ですが、これは多くの場合利用できません。この課題に対処するために、Noise2Noiseは、ペアのノイズクリーン画像を、収集が容易なペアのノイズノイズ画像に置き換えることができるという事実に基づいて設計されました。ただし、多くのシナリオでは、ペアのノイズノイズ画像の収集はまだ実用的ではありません。ラベル付けされた画像をバイパスするために、Noise2Voidメソッドは、単一のノイズの多い画像のみで周囲からマスクされたピクセルを予測し、改善が必要なノイズ除去結果を改善します。従来のノイズ除去方法に関する観察では、非局所平均(NLM)の結果は、通常、局所的にノイズ除去された結果よりも優れています。対照的に、Noise2Voidとそのバリアントは、NLMベースの方法のように画像内の自己類似性を利用しません。ここでは、画像のノイズ除去のためのNLMに触発された自己学習方法であるNoise2Simを提案します。具体的には、Noise2Simは、画像ピクセルの自己相似性を利用してノイズ除去ネットワークをトレーニングし、単一のノイズの多い画像のみを必要とします。私たちの理論的分析は、Noise2Simが穏やかな条件下でNoise2Noiseと同等になる傾向があることを示しています。類似のピクセルをグローバルに検索するための計算負荷を効率的に管理するために、Noise2Simトレーニング用のデータを提供する2段階の手順を設計します。広範な実験により、一般的なベンチマークデータセットに対するNoise2Simの優位性が実証されています。
Despite its best performance in image denoising, the supervised deep denoising methods require paired noise-clean data, which are often unavailable. To address this challenge, Noise2Noise was designed based on the fact that paired noise-clean images can be replaced by paired noise-noise images that are easier to collect. However, in many scenarios the collection of paired noise-noise images is still impractical. To bypass labeled images, Noise2Void methods predict masked pixels from their surroundings with single noisy images only and give improved denoising results that still need improvements. An observation on classic denoising methods is that non-local mean (NLM) outcomes are typically superior to locally denoised results. In contrast, Noise2Void and its variants do not utilize self-similarities in an image as the NLM-based methods do. Here we propose Noise2Sim, an NLM-inspired self-learning method for image denoising. Specifically, Noise2Sim leverages the self-similarity of image pixels to train the denoising network, requiring single noisy images only. Our theoretical analysis shows that Noise2Sim tends to be equivalent to Noise2Noise under mild conditions. To efficiently manage the computational burden for globally searching similar pixels, we design a two-step procedure to provide data for Noise2Sim training. Extensive experiments demonstrate the superiority of Noise2Sim on common benchmark datasets.
updated: Fri Jun 18 2021 07:02:58 GMT+0000 (UTC)
published: Fri Nov 06 2020 14:31:08 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト