arXiv reaDer
科学的発見のための深いノイズ除去:電子顕微鏡法の事例研究
Deep Denoising For Scientific Discovery: A Case Study In Electron Microscopy
ノイズ除去は、科学的イメージングにおける基本的な課題です。ディープ畳み込みニューラルネットワーク(CNN)は、自然画像のノイズ除去における最新技術を提供し、印象的な結果を生み出します。ただし、それらの可能性は、科学的イメージングのコンテキストではほとんど調査されていません。ノイズ除去CNNは通常、シミュレートされたノイズで人工的に破損した実際の自然画像でトレーニングされます。対照的に、科学的アプリケーションでは、ノイズのないグラウンドトゥルース画像は通常利用できません。この問題に対処するために、シミュレーションベースのノイズ除去(SBD)フレームワークを提案します。このフレームワークでは、CNNがシミュレーション画像でトレーニングされます。透過型電子顕微鏡(TEM)から得られたデータでフレームワークをテストします。これは、材料科学、生物学、医学で広く使用されているイメージング技術です。 SBDは、実際のデータだけでなく、シミュレートされたベンチマークデータセットでも、既存の手法を大幅に上回っています。ノイズ除去された画像とは別に、SBDは尤度マップを生成して、ノイズ除去された画像の構造と観測データの間の一致を視覚化します。私たちの結果は、視野が小さいなど、最先端のノイズ除去アーキテクチャの欠点を明らかにしています。CNNの視野を大幅に拡大すると、データ内の非局所的な周期的パターンを利用できるようになります。高ノイズレベルでは非常に重要です。さらに、SBDの一般化機能を分析し、トレーニングされたネットワークがイメージングパラメータと基礎となる信号構造の変動に対してロバストであることを示します。最後に、18,000の例を含むTEM画像の最初の公開されたベンチマークデータセットをリリースします。
Denoising is a fundamental challenge in scientific imaging. Deep convolutional neural networks (CNNs) provide the current state of the art in denoising natural images, where they produce impressive results. However, their potential has barely been explored in the context of scientific imaging. Denoising CNNs are typically trained on real natural images artificially corrupted with simulated noise. In contrast, in scientific applications, noiseless ground-truth images are usually not available. To address this issue, we propose a simulation-based denoising (SBD) framework, in which CNNs are trained on simulated images. We test the framework on data obtained from transmission electron microscopy (TEM), an imaging technique with widespread applications in material science, biology, and medicine. SBD outperforms existing techniques by a wide margin on a simulated benchmark dataset, as well as on real data. Apart from the denoised images, SBD generates likelihood maps to visualize the agreement between the structure of the denoised image and the observed data. Our results reveal shortcomings of state-of-the-art denoising architectures, such as their small field-of-view: substantially increasing the field-of-view of the CNNs allows them to exploit non-local periodic patterns in the data, which is crucial at high noise levels. In addition, we analyze the generalization capability of SBD, demonstrating that the trained networks are robust to variations of imaging parameters and of the underlying signal structure. Finally, we release the first publicly available benchmark dataset of TEM images, containing 18,000 examples.
updated: Tue Jul 13 2021 15:12:33 GMT+0000 (UTC)
published: Sat Oct 24 2020 19:59:28 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト