ノイズを除去し、ハイパースペクトル画像 (HSI) の視覚的品質を向上させることは、学界や産業界では困難です。 HSI ノイズ除去のために、ローカル、グローバル、またはスペクトルのコンテキスト情報を活用するために多大な努力が払われてきました。ただし、既存の方法には、複数のスケール間での機能の相互作用の活用と豊富なスペクトル構造の保存にまだ制限があります。これを考慮して、クリーンな HSI とノイズの多い HSI の間の複雑な非線形マッピングを学習できるマルチスケール アダプティブ フュージョン ネットワーク (MAFNet) を使用して HSI ノイズ除去を調査するための新しいソリューションを提案します。ハイパースペクトル画像ノイズ除去の改善に貢献する 2 つの重要なコンポーネントは、漸進的マルチスケール情報集約ネットワークと共注意融合モジュールです。具体的には、最初にマルチスケール画像のセットを生成し、それらを粗融合ネットワークにフィードして、コンテキスト テクスチャ相関を利用します。その後、並列マルチスケール サブネットワーク間で情報を交換するために、細かい融合ネットワークが続きます。さらに、異なるスケールからの有益な特徴を適応的に強調する共注意融合モジュールを設計し、それによってノイズ除去のための識別学習能力を強化します。合成および実際の HSI データセットに関する広範な実験は、提案された MAFNet が他の最先端技術よりも優れたノイズ除去パフォーマンスを達成したことを示しています。コードは \verb'https://github.com/summitgao/MAFNet' で入手できます。
Removing the noise and improving the visual quality of hyperspectral images (HSIs) is challenging in academia and industry. Great efforts have been made to leverage local, global or spectral context information for HSI denoising. However, existing methods still have limitations in feature interaction exploitation among multiple scales and rich spectral structure preservation. In view of this, we propose a novel solution to investigate the HSI denoising using a Multi-scale Adaptive Fusion Network (MAFNet), which can learn the complex nonlinear mapping between clean and noisy HSI. Two key components contribute to improving the hyperspectral image denoising: A progressively multiscale information aggregation network and a co-attention fusion module. Specifically, we first generate a set of multiscale images and feed them into a coarse-fusion network to exploit the contextual texture correlation. Thereafter, a fine fusion network is followed to exchange the information across the parallel multiscale subnetworks. Furthermore, we design a co-attention fusion module to adaptively emphasize informative features from different scales, and thereby enhance the discriminative learning capability for denoising. Extensive experiments on synthetic and real HSI datasets demonstrate that the proposed MAFNet has achieved better denoising performance than other state-of-the-art techniques. Our codes are available at \verb'https://github.com/summitgao/MAFNet'.