arXiv reaDer
LADMM-Net: An Unrolled Deep Network For Spectral Image Fusion From Compressive Data
画像融合は、低空間解像度のハイパースペクトル画像と低スペクトル解像度のマルチスペクトル画像から高解像度のスペクトル画像を推定することを目的としています。この点で、圧縮スペクトルイメージング(CSI)は、少ない測定回数を使用してスペクトル画像の関連情報をキャプチャする取得フレームワークとして登場しました。最近、CSI測定からのさまざまな画像融合法が提案されています。ただし、これらの方法は実行時間が長く、スパース性を誘発する塩基を選択するという困難な課題に直面しています。この論文では、圧縮測定からのスペクトル画像を融合するために、アルゴリズム展開アプローチの下での深いネットワークが提案されています。 LADMM-Netと呼ばれるこのアーキテクチャは、乗数の交互方向法の線形化バージョンの各反復を、連結によって深いネットワークを展開する処理層にキャストします。線形化されたアプローチにより、コストのかかる行列の反転に頼ることなく、融合推定値を取得できます。さらに、このアプローチは、学習可能な変換の利点を活用して、補助変数とラグランジュ乗数の両方に含まれる画像の詳細を推定します。最後に、提案された手法のパフォーマンスは、2つのスペクトル画像データベースと実験室でキャプチャされた1つのデータセットで評価されます。広範なシミュレーションは、提案された方法が、圧縮測定からのスペクトル画像を融合する最先端のアプローチよりも優れていることを示しています。
Image fusion aims at estimating a high-resolution spectral image from a low-spatial-resolution hyperspectral image and a low-spectral-resolution multispectral image. In this regard, compressive spectral imaging (CSI) has emerged as an acquisition framework that captures the relevant information of spectral images using a reduced number of measurements. Recently, various image fusion methods from CSI measurements have been proposed. However, these methods exhibit high running times and face the challenging task of choosing sparsity-inducing bases. In this paper, a deep network under the algorithm unrolling approach is proposed for fusing spectral images from compressive measurements. This architecture, dubbed LADMM-Net, casts each iteration of a linearized version of the alternating direction method of multipliers into a processing layer whose concatenation deploys a deep network. The linearized approach enables obtaining fusion estimates without resorting to costly matrix inversions. Furthermore, this approach exploits the benefits of learnable transforms to estimate the image details included in both the auxiliary variable and the Lagrange multiplier. Finally, the performance of the proposed technique is evaluated on two spectral image databases and one dataset captured at the laboratory. Extensive simulations show that the proposed method outperforms the state-of-the-art approaches that fuse spectral images from compressive measurements.
updated: Mon Aug 02 2021 19:17:25 GMT+0000 (UTC)
published: Mon Mar 01 2021 12:04:42 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト