本論文では、ハイパースペクトル画像(HSI)分類のためのスペクトル空間グラフ推論ネットワーク(SSGRN)を提案する。具体的には、このネットワークには、空間グラフ推論サブネットワーク(SAGRN)とスペクトルグラフ推論サブネットワーク(SEGRN)を別々に命名して、それぞれ空間グラフとスペクトルグラフのコンテキストをキャプチャする2つの部分が含まれています。元の画像にスーパーピクセルセグメンテーションを実装したり、ラベル画像のガイドの下でカテゴリ特徴を取得しようとした以前のアプローチとは異なり、ネットワークの中間特徴に対してスーパーピクセルセグメンテーションを実行して、均一な領域を適応的に生成し、効果的な記述子を取得します。次に、スペクトル部分で同様のアイデアを採用し、チャネルを合理的に集約して、スペクトルグラフコンテキストキャプチャ用のスペクトル記述子を生成します。 SAGRNおよびSEGRNのすべてのグラフ推論手順は、グラフの畳み込みによって実現されます。提案された方法のグローバルな知覚能力を保証するために、グラフ推論のすべての隣接行列は、非局所的な自己注意メカニズムの助けを借りて取得されます。最後に、抽出された空間グラフとスペクトルグラフのコンテキストを組み合わせることにより、SSGRNを取得して、高精度の分類を実現します。 3つの公開HSIベンチマークでの広範な定量的および定性的実験は、他の最先端のアプローチと比較した提案された方法の競争力を示しています。
In this paper, we propose a spectral-spatial graph reasoning network (SSGRN) for hyperspectral image (HSI) classification. Concretely, this network contains two parts that separately named spatial graph reasoning subnetwork (SAGRN) and spectral graph reasoning subnetwork (SEGRN) to capture the spatial and spectral graph contexts, respectively. Different from the previous approaches implementing superpixel segmentation on the original image or attempting to obtain the category features under the guide of label image, we perform the superpixel segmentation on intermediate features of the network to adaptively produce the homogeneous regions to get the effective descriptors. Then, we adopt a similar idea in spectral part that reasonably aggregating the channels to generate spectral descriptors for spectral graph contexts capturing. All graph reasoning procedures in SAGRN and SEGRN are achieved through graph convolution. To guarantee the global perception ability of the proposed methods, all adjacent matrices in graph reasoning are obtained with the help of non-local self-attention mechanism. At last, by combining the extracted spatial and spectral graph contexts, we obtain the SSGRN to achieve a high accuracy classification. Extensive quantitative and qualitative experiments on three public HSI benchmarks demonstrate the competitiveness of the proposed methods compared with other state-of-the-art approaches.