arXiv reaDer
Noise2Stack:ボリュームデータから学習することによる画像復元の改善
Noise2Stack: Improving Image Restoration by Learning from Volumetric Data
生物医学画像はノイズが多いです。イメージング機器自体には物理的な制限があり、その結果として生じる信号対雑音比、取得速度、およびイメージング深度の間の実験的なトレードオフが問題を悪化させます。したがって、ノイズ除去は画像処理パイプラインの重要な部分であり、畳み込みニューラルネットワークは現在このタスクに最適な方法です。人気のあるアプローチの1つであるNoise2Noiseは、クリーンなグラウンドトゥルースを必要とせず、代わりに2番目のノイズの多いコピーをトレーニングターゲットとして使用します。 Noise2SelfやNoise2Voidなどの自己監視方式は、明示的なターゲットなしで信号を学習することでデータ要件を緩和しますが、単一の画像に情報がないために制限されます。ここでは、Noise2Noiseメソッドを画像スタックに拡張したNoise2Stackを紹介します。これは、空間的に隣接する平面間の共有信号を利用します。磁気共鳴脳スキャンと新しく取得したマルチプレーン顕微鏡データに関する実験では、スタック内の隣接する画像からのみ学習するだけで、Noise2NoiseとNoise2Voidを上回り、教師ありノイズ除去方法とのギャップを埋めることができます。私たちの調査結果は、マルチプレーン生物医学画像のノイズ除去パイプラインにおける低コスト、高報酬の改善を示しています。この作業の一環として、顕微鏡データセットをリリースして、マルチプレーン画像のノイズ除去のベンチマークを確立します。
Biomedical images are noisy. The imaging equipment itself has physical limitations, and the consequent experimental trade-offs between signal-to-noise ratio, acquisition speed, and imaging depth exacerbate the problem. Denoising is, therefore, an essential part of any image processing pipeline, and convolutional neural networks are currently the method of choice for this task. One popular approach, Noise2Noise, does not require clean ground truth, and instead, uses a second noisy copy as a training target. Self-supervised methods, like Noise2Self and Noise2Void, relax data requirements by learning the signal without an explicit target but are limited by the lack of information in a single image. Here, we introduce Noise2Stack, an extension of the Noise2Noise method to image stacks that takes advantage of a shared signal between spatially neighboring planes. Our experiments on magnetic resonance brain scans and newly acquired multiplane microscopy data show that learning only from image neighbors in a stack is sufficient to outperform Noise2Noise and Noise2Void and close the gap to supervised denoising methods. Our findings point towards low-cost, high-reward improvement in the denoising pipeline of multiplane biomedical images. As a part of this work, we release a microscopy dataset to establish a benchmark for the multiplane image denoising.
updated: Tue Nov 10 2020 14:01:47 GMT+0000 (UTC)
published: Tue Nov 10 2020 14:01:47 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト