arXiv reaDer
ハイパースペクトル圧縮スナップショット再構成のための教師なし空間スペクトルネットワーク学習
Unsupervised Spatial-spectral Network Learning for Hyperspectral Compressive Snapshot Reconstruction
ハイパースペクトル圧縮イメージングは、圧縮センシング理論を利用して、時間スキャンなしでコード化開口スナップショット測定を実現し、3次元空間スペクトルデータ全体が、単一の統合期間中に2次元投影によってキャプチャされます。その中心的な問題は、圧縮センシング再構成アルゴリズムを使用して、基になるハイパースペクトル画像をどのように再構成するかです。さまざまなスペクトルイメージングデバイスのスペクトル応答特性と波長範囲の多様性のため、以前の研究では、複雑なスペクトル変動をキャプチャするには不十分であるか、新しいハイパースペクトルイメージャへの適応能力が不足していることがよくあります。これらの問題に対処するために、圧縮スナップショット測定からのみハイパースペクトル画像を再構築する教師なし空間スペクトルネットワークを提案します。提案されたネットワークは、スナップショット測定を条件とする条件付き生成モデルとして機能し、空間スペクトル注意モジュールを利用して、ハイパースペクトル画像の共同空間スペクトル相関をキャプチャします。ネットワークパラメータは、ネットワーク出力がイメージングモデルに従って特定のスナップショット測定値と厳密に一致するように最適化されているため、提案されたネットワークはさまざまなイメージング設定に適応でき、本質的にネットワークの適用性を高めることができます。複数のデータセットに対する広範な実験は、私たちのネットワークが最先端の方法よりも優れた再構築結果を達成できることを示しています。
Hyperspectral compressive imaging takes advantage of compressive sensing theory to achieve coded aperture snapshot measurement without temporal scanning, and the entire three-dimensional spatial-spectral data is captured by a two-dimensional projection during a single integration period. Its core issue is how to reconstruct the underlying hyperspectral image using compressive sensing reconstruction algorithms. Due to the diversity in the spectral response characteristics and wavelength range of different spectral imaging devices, previous works are often inadequate to capture complex spectral variations or lack the adaptive capacity to new hyperspectral imagers. In order to address these issues, we propose an unsupervised spatial-spectral network to reconstruct hyperspectral images only from the compressive snapshot measurement. The proposed network acts as a conditional generative model conditioned on the snapshot measurement, and it exploits the spatial-spectral attention module to capture the joint spatial-spectral correlation of hyperspectral images. The network parameters are optimized to make sure that the network output can closely match the given snapshot measurement according to the imaging model, thus the proposed network can adapt to different imaging settings, which can inherently enhance the applicability of the network. Extensive experiments upon multiple datasets demonstrate that our network can achieve better reconstruction results than the state-of-the-art methods.
updated: Sat Jul 31 2021 15:14:04 GMT+0000 (UTC)
published: Fri Dec 18 2020 12:29:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト