arXiv reaDer
スナップショット圧縮イメージング用の3D-CNNプリアーを備えた高密度ディープアンフォールディングネットワーク
Dense Deep Unfolding Network with 3D-CNN Prior for Snapshot Compressive Imaging
スナップショット圧縮イメージング(SCI)は、2次元カメラを介して3次元信号を記録することを目的としています。高速で正確なSCI回復アルゴリズムを構築するために、モデルベースの方法の解釈可能性と学習ベースの方法の速度を組み込み、SCIの前に3D-CNNを備えた新しい高密度ディープアンフォールディングネットワーク(DUN)を提示します。各フェーズは、半二次分割(HQS)の反復から展開されます。フレーム間の時空間相関をより有効に活用し、既存のDUNの隣接するフェーズ間の情報損失の問題に対処するために、近位マッピングモジュールで事前に3D-CNNを採用し、新しい高密度特徴マップ(DFM)戦略を開発することを提案します。それぞれ。さらに、ネットワークの堅牢性を促進するために、フェーズ間情報を適応的に融合できるようにする高密度機能マップ適応(DFMA)モジュールをさらに提案します。すべてのパラメーターは、エンドツーエンドの方法で学習されます。シミュレーションデータと実際のデータに関する広範な実験により、私たちの方法の優位性が検証されます。ソースコードはhttps://github.com/jianzhangcs/SCI3Dで入手できます。
Snapshot compressive imaging (SCI) aims to record three-dimensional signals via a two-dimensional camera. For the sake of building a fast and accurate SCI recovery algorithm, we incorporate the interpretability of model-based methods and the speed of learning-based ones and present a novel dense deep unfolding network (DUN) with 3D-CNN prior for SCI, where each phase is unrolled from an iteration of Half-Quadratic Splitting (HQS). To better exploit the spatial-temporal correlation among frames and address the problem of information loss between adjacent phases in existing DUNs, we propose to adopt the 3D-CNN prior in our proximal mapping module and develop a novel dense feature map (DFM) strategy, respectively. Besides, in order to promote network robustness, we further propose a dense feature map adaption (DFMA) module to allow inter-phase information to fuse adaptively. All the parameters are learned in an end-to-end fashion. Extensive experiments on simulation data and real data verify the superiority of our method. The source code is available at https://github.com/jianzhangcs/SCI3D.
updated: Tue Sep 14 2021 09:42:42 GMT+0000 (UTC)
published: Tue Sep 14 2021 09:42:42 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト