画像のノイズ除去の分野では、現在、ノイズの多い入力画像とクリーンなターゲット画像のペアで学習する識別型ディープラーニング法が主流となっている。最近、このような手法は、クリーンなターゲット画像なしでも学習できることが示された。その代わりに、Noise2Noise (N2N)として知られているアプローチでは、独立したノイズのある画像のペアを使用することができる。ここでは、この考え方をさらに一歩進めた学習スキームであるNoise2Void (N2V)を紹介する。N2Vは、ノイズの多い画像ペアを必要とせず、クリーンな対象画像も必要としない。その結果、N2Vはノイズ除去されたデータを直接学習することができるので、他の方法が適用できない場合にも適用することができる。特に興味深いのは、クリーンであろうがノイズの多いデータであろうが、トレーニングターゲットを取得することができないことが多い生物医学画像データへの応用である。我々は、クリーンなターゲット画像やノイズの多い画像ペアが利用可能なアプローチとN2Vの性能を比較している。直感的には、N2Vは訓練中により多くの情報が利用可能な手法よりも優れた性能を発揮することは期待できない。しかし、Noise2Voidのノイズ除去性能は適度に低下し、トレーニングを必要としないノイズ除去手法と比較して良い結果が得られた。
The field of image denoising is currently dominated by discriminative deep learning methods that are trained on pairs of noisy input and clean target images. Recently it has been shown that such methods can also be trained without clean targets. Instead, independent pairs of noisy images can be used, in an approach known as Noise2Noise (N2N). Here, we introduce Noise2Void (N2V), a training scheme that takes this idea one step further. It does not require noisy image pairs, nor clean target images. Consequently, N2V allows us to train directly on the body of data to be denoised and can therefore be applied when other methods cannot. Especially interesting is the application to biomedical image data, where the acquisition of training targets, clean or noisy, is frequently not possible. We compare the performance of N2V to approaches that have either clean target images and/or noisy image pairs available. Intuitively, N2V cannot be expected to outperform methods that have more information available during training. Still, we observe that the denoising performance of Noise2Void drops in moderation and compares favorably to training-free denoising methods.