arXiv reaDer
SAWU-Net: ハイパースペクトル画像のための空間的注意重み付けアンミキシング ネットワーク
SAWU-Net: Spatial Attention Weighted Unmixing Network for Hyperspectral Images
ハイパースペクトルのアンミキシングは、ハイパースペクトル画像の解釈において重要でありながら困難なタスクです。最近、ディープオートエンコーダーを介してハイパースペクトルアンミキシングタスクを解決するために多大な努力が払われてきました。ただし、既存のネットワークは主に混合ピクセルからスペクトル特徴を抽出することに重点を置いており、空間特徴の事前知識の採用はまだ不十分です。この目的のために、SAWU-Net と呼ばれる空間的注意重み付けアンミキシング ネットワークを提唱しました。これは、空間的特徴をより適切に活用するために、空間的アテンション ネットワークと重み付きアンミキシング ネットワークをエンドツーエンドで学習します。特に、ピクセルベースのスペクトル情報とパッチベースの空間情報をそれぞれ効率的にモデル化するために、ピクセルアテンションブロックとウィンドウアテンションブロックで構成される空間アテンションモジュールを設計します。加重分離フレームワークでは、中央のピクセルの存在量は、周囲のピクセルの粗粒度の存在量によって動的に重み付けされます。さらに、SAWU-Net は、周囲のピクセルをより効果的に動的に統合するために、空間アテンション メカニズムを通じて動的に適応する空間重みを生成します。実際のデータセットと合成データセットに関する実験結果は、SAWU-Net の精度と優位性を示しています。これは、提案された空間的注意メカニズムの有効性を反映しています。
Hyperspectral unmixing is a critical yet challenging task in hyperspectral image interpretation. Recently, great efforts have been made to solve the hyperspectral unmixing task via deep autoencoders. However, existing networks mainly focus on extracting spectral features from mixed pixels, and the employment of spatial feature prior knowledge is still insufficient. To this end, we put forward a spatial attention weighted unmixing network, dubbed as SAWU-Net, which learns a spatial attention network and a weighted unmixing network in an end-to-end manner for better spatial feature exploitation. In particular, we design a spatial attention module, which consists of a pixel attention block and a window attention block to efficiently model pixel-based spectral information and patch-based spatial information, respectively. While in the weighted unmixing framework, the central pixel abundance is dynamically weighted by the coarse-grained abundances of surrounding pixels. In addition, SAWU-Net generates dynamically adaptive spatial weights through the spatial attention mechanism, so as to dynamically integrate surrounding pixels more effectively. Experimental results on real and synthetic datasets demonstrate the better accuracy and superiority of SAWU-Net, which reflects the effectiveness of the proposed spatial attention mechanism.
updated: Sat Apr 22 2023 05:22:50 GMT+0000 (UTC)
published: Sat Apr 22 2023 05:22:50 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト