arXiv reaDer
衛星画像のノイズ除去のための Riesz-Quincunx-UNet 変分自動エンコーダ
Riesz-Quincunx-UNet Variational Auto-Encoder for Satellite Image Denoising
U-Net アーキテクチャなどの多重解像度ディープ ラーニング アプローチは、画像の分類とセグメント化において高いパフォーマンスを達成しています。ただし、これらのアプローチは潜像表現を提供せず、画像データの分解、ノイズ除去、および再構築には使用できません。 U-Net およびその他の畳み込みニューラル ネットワーク (CNN) アーキテクチャは、一般的にプーリングを使用して受容野を拡大しますが、これは通常、不可逆的な情報損失をもたらします。この研究では、Riesz-Quincunx (RQ) ウェーブレット変換を含めることを提案しています。これは、1) 高次の Riesz ウェーブレット変換と 2) 直交 Quincunx ウェーブレット (どちらも医用画像のぼやけを減らすために使用されています) を組み合わせたものです。 、衛星画像とその時系列のノイズを減らします。変換された特徴空間では、特徴のランダムな摂動が画像にどのように影響してノイズをさらに減らすかを理解するための変分アプローチを提案します。両方のアプローチを組み合わせて、衛星画像のノイズを低減するために使用される画像と時系列分解のためのハイブリッド RQUNet-VAE スキームを紹介します。提案されたRQUNet-VAEが、他の最先端の方法と比較して、衛星画像のノイズを削減するのにより効果的であることを実証する定性的および定量的な実験結果を提示します。また、画像のノイズ除去、拡散による画像と時系列の分解、および画像のセグメンテーションを含む、マルチバンド衛星画像のいくつかのアプリケーションにこのスキームを適用します。
Multiresolution deep learning approaches, such as the U-Net architecture, have achieved high performance in classifying and segmenting images. However, these approaches do not provide a latent image representation and cannot be used to decompose, denoise, and reconstruct image data. The U-Net and other convolutional neural network (CNNs) architectures commonly use pooling to enlarge the receptive field, which usually results in irreversible information loss. This study proposes to include a Riesz-Quincunx (RQ) wavelet transform, which combines 1) higher-order Riesz wavelet transform and 2) orthogonal Quincunx wavelets (which have both been used to reduce blur in medical images) inside the U-net architecture, to reduce noise in satellite images and their time-series. In the transformed feature space, we propose a variational approach to understand how random perturbations of the features affect the image to further reduce noise. Combining both approaches, we introduce a hybrid RQUNet-VAE scheme for image and time series decomposition used to reduce noise in satellite imagery. We present qualitative and quantitative experimental results that demonstrate that our proposed RQUNet-VAE was more effective at reducing noise in satellite imagery compared to other state-of-the-art methods. We also apply our scheme to several applications for multi-band satellite images, including: image denoising, image and time-series decomposition by diffusion and image segmentation.
updated: Thu Aug 25 2022 19:51:07 GMT+0000 (UTC)
published: Thu Aug 25 2022 19:51:07 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト