近年、ニューラル ネットワーク ベースの画像ノイズ除去アプローチが、生物医学顕微鏡データの分析に革命をもたらしました。 Noise2Void (N2V) などの自己教師ありメソッドは、専用のトレーニング データが利用できない場合でも、ほぼすべてのノイズの多いデータセットに適用できます。おそらく、これにより、ライフ サイエンス全体で N2V の迅速かつ広範な採用が促進されました。残念ながら、N2V の基礎となるブラインド スポット トレーニングは、かなり目に見えるチェッカーボード アーティファクトにつながる可能性があり、それによって最終的な予測の品質が大幅に低下します。この作業では、バニラ N2V セットアップに 2 つの変更を加えて、不要なアーティファクトを大幅に削減するのに役立ちます。まず、修正されたネットワーク アーキテクチャを提案します。つまり、使用される U-Net 全体で MaxPool レイヤーの代わりに BlurPool を使用し、残りの U-Net を非残りの U-Net にロールバックし、最上位の U-Net でスキップ接続を排除します。ネットレベル。さらに、選出された盲点ピクセルを埋めるピクセル強度値を決定するための新しい置換戦略を提案します。さまざまな顕微鏡および自然画像データで変更を検証します。複数のノイズ タイプとさまざまな振幅から追加された合成ノイズに基づいて、提案された両方の修正が、完全に自己監視された画像ノイズ除去の現在の最先端技術を推進することを示します。
In recent years, neural network based image denoising approaches have revolutionized the analysis of biomedical microscopy data. Self-supervised methods, such as Noise2Void (N2V), are applicable to virtually all noisy datasets, even without dedicated training data being available. Arguably, this facilitated the fast and widespread adoption of N2V throughout the life sciences. Unfortunately, the blind-spot training underlying N2V can lead to rather visible checkerboard artifacts, thereby reducing the quality of final predictions considerably. In this work, we present two modifications to the vanilla N2V setup that both help to reduce the unwanted artifacts considerably. Firstly, we propose a modified network architecture, i.e., using BlurPool instead of MaxPool layers throughout the used U-Net, rolling back the residual U-Net to a non-residual U-Net, and eliminating the skip connections at the uppermost U-Net level. Additionally, we propose new replacement strategies to determine the pixel intensity values that fill in the elected blind-spot pixels. We validate our modifications on a range of microscopy and natural image data. Based on added synthetic noise from multiple noise types and at varying amplitudes, we show that both proposed modifications push the current state-of-the-art for fully self-supervised image denoising.