以前の研究では、ハイパースペクトル画像(HSI)からの空間コンテキスト特徴抽出のためのカプセルネットワークの大きな可能性が示されています。ただし、カプセルの畳み込みカーネルのサンプリング位置は固定されており、HSIの一貫性のないセマンティック情報に従って適応的に変更することはできません。この観察に基づいて、本論文は、拡大された受容野に基づいて畳み込みカーネルのサンプリング位置を回転させることができる適応空間パターン(ASP)ユニットを開発することにより、適応空間パターンカプセルネットワーク(ASPCNet)アーキテクチャを提案する。このユニットは、より少ないパラメーターでHSIのより識別力のある表現を学習できることに注意してください。具体的には、2つのカスケードASPベースの畳み込み演算(ASPConvs)を入力画像に適用して、比較的高レベルのセマンティック機能を学習し、最も基本的な機能を使用するよりも正確にカプセル間で階層構造を送信します。さらに、セマンティック機能はASPベースのconv-capsule操作(ASPCaps)に入力され、カプセル間のオブジェクトの形状を適応的に調査し、カプセルネットワークの可能性をさらに調査します。最後に、テストサンプルを中心とした画像パッチのクラスラベルは、完全に接続されたカプセル層に従って決定できます。 3つの公開データセットでの実験は、ASPCNetが最先端の方法よりも高い精度で競争力のあるパフォーマンスを生み出すことができることを示しています。
Previous studies have shown the great potential of capsule networks for the spatial contextual feature extraction from hyperspectral images (HSIs). However, the sampling locations of the convolutional kernels of capsules are fixed and cannot be adaptively changed according to the inconsistent semantic information of HSIs. Based on this observation, this paper proposes an adaptive spatial pattern capsule network (ASPCNet) architecture by developing an adaptive spatial pattern (ASP) unit, that can rotate the sampling location of convolutional kernels on the basis of an enlarged receptive field. Note that this unit can learn more discriminative representations of HSIs with fewer parameters. Specifically, two cascaded ASP-based convolution operations (ASPConvs) are applied to input images to learn relatively high-level semantic features, transmitting hierarchical structures among capsules more accurately than the use of the most fundamental features. Furthermore, the semantic features are fed into ASP-based conv-capsule operations (ASPCaps) to explore the shapes of objects among the capsules in an adaptive manner, further exploring the potential of capsule networks. Finally, the class labels of image patches centered on test samples can be determined according to the fully connected capsule layer. Experiments on three public datasets demonstrate that ASPCNet can yield competitive performance with higher accuracies than state-of-the-art methods.