arXiv reaDer
ワンポット マルチフレーム ノイズ除去
One-Pot Multi-Frame Denoising
学習ベースのノイズ除去のパフォーマンスは、クリーンな監視に大きく依存します。しかし、多くのシーンできれいな画像を得ることは困難です。それどころか、同じ視野に対してノイズの多い複数のフレームをキャプチャすることは可能であり、実際には自然なことがよくあります。したがって、クリーンなラベルの制限を回避し、モデルのトレーニングにノイズの多いデータを最大限に活用する必要があります。そのため、マルチフレーム画像のワンポットノイズ除去 (OPD) と呼ばれる教師なし学習戦略を提案します。 OPD は、最初に提案された教師なしマルチフレーム ノイズ除去 (MFD) メソッドです。監視あり Noise2Clean (N2C) と監視なし Noise2Noise (N2N) の両方を含む従来の監視スキームとは異なり、OPD は複数のフレームすべての間で相互監視を実行します。これにより、監視の多様性を学習し、モデルがフレーム間の相関関係をより深く掘り下げることができます。 N2N は、実際には提案された OPD の単純化されたケースであることが証明されています。データ割り当てと損失関数の観点から、モデルのトレーニング中に OPD を達成するために、ランダム結合 (RC) と疎外損失 (AL) の 2 つの特定の実装がそれぞれ提供されます。実際には、私たちの実験は、OPD が SOTA の教師なしノイズ除去法として動作し、合成ガウス ノイズとポアソン ノイズ、および実世界の光コヒーレンストモグラフィ (OCT) スペックル ノイズの教師あり N2C メソッドに匹敵することを示しています。
The performance of learning-based denoising largely depends on clean supervision. However, it is difficult to obtain clean images in many scenes. On the contrary, the capture of multiple noisy frames for the same field of view is available and often natural in real life. Therefore, it is necessary to avoid the restriction of clean labels and make full use of noisy data for model training. So we propose an unsupervised learning strategy named one-pot denoising (OPD) for multi-frame images. OPD is the first proposed unsupervised multi-frame denoising (MFD) method. Different from the traditional supervision schemes including both supervised Noise2Clean (N2C) and unsupervised Noise2Noise (N2N), OPD executes mutual supervision among all of the multiple frames, which gives learning more diversity of supervision and allows models to mine deeper into the correlation among frames. N2N has also been proved to be actually a simplified case of the proposed OPD. From the perspectives of data allocation and loss function, two specific implementations, random coupling (RC) and alienation loss (AL), are respectively provided to accomplish OPD during model training. In practice, our experiments demonstrate that OPD behaves as the SOTA unsupervised denoising method and is comparable to supervised N2C methods for synthetic Gaussian and Poisson noise, and real-world optical coherence tomography (OCT) speckle noise.
updated: Sat Feb 18 2023 09:32:59 GMT+0000 (UTC)
published: Sat Feb 18 2023 09:32:59 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト