arXiv reaDer
WaveFuse:離散ウェーブレット変換による画像融合のための統合されたディープフレームワーク
WaveFuse: A Unified Deep Framework for Image Fusion with Discrete Wavelet Transform
地域エネルギーとディープラーニングによるマルチスケール離散ウェーブレット変換の組み合わせに基づいて、複数のアプリケーションシナリオのための教師なし画像融合アーキテクチャを提案します。私たちの知る限り、これは従来の画像融合方法がディープラーニングと組み合わされたのはこれが初めてです。特徴マップの有用な情報は、提案された方法のマルチスケール離散ウェーブレット変換を通じて適切に利用できます。他の最先端の融合方法と比較して、提案されたアルゴリズムは、主観的評価と客観的評価の両方でより良い融合パフォーマンスを示します。さらに、COCOデータセットでランダムに選択された数百の画像のみを含む非常に小さなデータセットでトレーニングすることにより、COCOデータセットでトレーニングされた同等の融合パフォーマンスが得られることにも言及する価値があります。したがって、トレーニング時間が大幅に短縮され、実用性とトレーニング効率の両方でモデルのパフォーマンスが向上します。
We propose an unsupervised image fusion architecture for multiple application scenarios based on the combination of multi-scale discrete wavelet transform through regional energy and deep learning. To our best knowledge, this is the first time the conventional image fusion method has been combined with deep learning. The useful information of feature maps can be utilized adequately through multi-scale discrete wavelet transform in our proposed method.Compared with other state-of-the-art fusion method, the proposed algorithm exhibits better fusion performance in both subjective and objective evaluation. Moreover, it's worth mentioning that comparable fusion performance trained in COCO dataset can be obtained by training with a much smaller dataset with only hundreds of images chosen randomly from COCO. Hence, the training time is shortened substantially, leading to the improvement of the model's performance both in practicality and training efficiency.
updated: Mon Oct 11 2021 05:37:27 GMT+0000 (UTC)
published: Tue Jul 28 2020 10:30:47 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト