arXiv reaDer
ハイパースペクトル画像の超解像のためのフィードバック洗練されたローカル-グローバルネットワーク
Feedback Refined Local-Global Network for Super-Resolution of Hyperspectral Imagery
深層学習技術の開発により、畳み込みニューラルネットワークに基づくマルチスペクトル画像超解像法は最近大きな進歩を遂げました。ただし、単一のハイパースペクトル画像の超解像は、ハイパースペクトルデータの高次元で複雑なスペクトル特性のために依然として困難な問題であり、空間情報とスペクトル情報を同時にキャプチャすることは困難です。この問題に対処するために、ハイパースペクトル画像の超解像のための新しいフィードバック洗練されたローカルグローバルネットワーク(FRLGN)を提案します。具体的には、新しいフィードバック構造とローカル-グローバルスペクトルブロックを開発して、空間的およびスペクトル的特徴抽出の難しさを軽減します。フィードバック構造は、高レベルの情報を転送して、低レベルの機能の生成プロセスをガイドできます。これは、有限の展開を伴う反復構造によって実現されます。さらに、返される高レベルの情報を効果的に使用するために、フィードバック接続を処理するためにローカル-グローバルスペクトルブロックが構築されます。 Local-Global Spectral Blockは、フィードバックの高レベル情報を利用して、ローカルスペクトルバンドからの低レベルの特徴を修正し、グローバルスペクトルバンド間で強力な高レベルの表現を生成します。フィードバック構造とローカルグローバルスペクトルブロックを組み込むことにより、FRLGNはスペクトルバンド間の空間スペクトル相関を完全に活用し、高解像度のハイパースペクトル画像を徐々に再構築できます。 FRLGNのソースコードはhttps://github.com/tangzhenjie/FRLGNで入手できます。
With the development of deep learning technology, multi-spectral image super-resolution methods based on convolutional neural network have recently achieved great progress. However, the single hyperspectral image super-resolution remains a challenging problem due to the high-dimensional and complex spectral characteristics of hyperspectral data, which make it difficult to simultaneously capture spatial and spectral information. To deal with this issue, we propose a novel Feedback Refined Local-Global Network (FRLGN) for the super-resolution of hyperspectral image. To be specific, we develop a new Feedback Structure and a Local-Global Spectral Block to alleviate the difficulty in spatial and spectral feature extraction. The Feedback Structure can transfer the high-level information to guide the generation process of low-level feature, which is achieved by a recurrent structure with finite unfoldings. Furthermore, in order to effectively use the high-level information passed back, a Local-Global Spectral Block is constructed to handle the feedback connections. The Local-Global Spectral Block utilizes the feedback high-level information to correct the low-level feature from local spectral bands and generates powerful high-level representations among global spectral bands. By incorporating the Feedback Structure and Local-Global Spectral Block, the FRLGN can fully exploit spatial-spectral correlations among spectral bands and gradually reconstruct high-resolution hyperspectral images. The source code of FRLGN is available at https://github.com/tangzhenjie/FRLGN.
updated: Mon Jan 10 2022 07:51:18 GMT+0000 (UTC)
published: Sun Mar 07 2021 13:28:48 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト