arXiv reaDer
A3CLNN:マルチソースリモートセンシングデータ分類のための空間、スペクトル、マルチスケール注意ConvLSTMニューラルネットワーク
A3CLNN: Spatial, Spectral and Multiscale Attention ConvLSTM Neural Network for Multisource Remote Sensing Data Classification
複数のデータソースの情報を効果的に活用するという問題は、リモートセンシングにおいて、関連性はあるものの挑戦的な研究トピックになっています。この論文では、ハイパースペクトル画像(HSI)と光検出および測距(LiDAR)データという2つのデータソースの相補性を活用するための新しいアプローチを提案します。具体的には、マルチソースリモートセンシングデータの特徴抽出と分類のために、新しいデュアルチャネル空間、スペクトル、およびマルチスケール注意畳み込み長期記憶ニューラルネットワーク(デュアルチャネルA3CLNNと呼ばれる)を開発します。空間、スペクトル、およびマルチスケールの注意メカニズムは、スペクトルおよび空間で強化された特徴表現を学習し、さまざまなクラスのマルチスケール情報を表現するために、HSIおよびLiDARデータ用に最初に設計されています。設計された融合ネットワークでは、新しい複合注意学習メカニズム(3レベルの融合戦略と組み合わせて)を使用して、これら2つのデータソースの機能を完全に統合します。最後に、転移学習のアイデアに触発されて、新しい段階的なトレーニング戦略が最終的な分類結果をもたらすように設計されています。いくつかのマルチソースリモートセンシングデータセットで実施された実験結果は、新しく提案されたデュアルチャネルA3CLNNが、他の最先端の方法よりも優れた特徴表現能力を示すことを示しています(より競争力のある分類パフォーマンスにつながります)。
The problem of effectively exploiting the information multiple data sources has become a relevant but challenging research topic in remote sensing. In this paper, we propose a new approach to exploit the complementarity of two data sources: hyperspectral images (HSIs) and light detection and ranging (LiDAR) data. Specifically, we develop a new dual-channel spatial, spectral and multiscale attention convolutional long short-term memory neural network (called dual-channel A3CLNN) for feature extraction and classification of multisource remote sensing data. Spatial, spectral and multiscale attention mechanisms are first designed for HSI and LiDAR data in order to learn spectral- and spatial-enhanced feature representations, and to represent multiscale information for different classes. In the designed fusion network, a novel composite attention learning mechanism (combined with a three-level fusion strategy) is used to fully integrate the features in these two data sources. Finally, inspired by the idea of transfer learning, a novel stepwise training strategy is designed to yield a final classification result. Our experimental results, conducted on several multisource remote sensing data sets, demonstrate that the newly proposed dual-channel A3CLNN exhibits better feature representation ability (leading to more competitive classification performance) than other state-of-the-art methods.
updated: Sat Apr 09 2022 12:43:32 GMT+0000 (UTC)
published: Sat Apr 09 2022 12:43:32 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト