arXiv reaDer
適応型赤外線および可視画像の超解像融合のためのデータセットフリーの自己監視解きほぐし学習法
A Dataset-free Self-supervised Disentangled Learning Method for Adaptive Infrared and Visible Images Super-resolution Fusion
この研究は、自己監視解きほぐし学習(SDL)という名前の物理モデルに基づく新しい一般的なデータセットのない自己監視学習フレームワークを提案し、生成ネットワークとRetinexでSDLフレームワークを適用するDeep Retinex融合(DRF)という名前の新しい方法を提案します赤外線および可視画像の超解像融合の理論。一方、生成型デュアルパス融合ネットワークZipperNetと適応融合損失関数Retinex損失は、効果的に高品質の融合を実現するように設計されています。 DRF(SDLに基づく)のコアアイデアは、2つの部分で構成されています。1つは、生成ネットワークを使用して物理モデルから解きほぐされたコンポーネントを生成することです。もう1つは、物理的な関係に基づいて設計された損失関数であり、生成されたコンポーネントは、トレーニングフェーズで損失関数によって結合されます。さらに、提案されたDRFの有効性を検証するために、6つの最先端の方法と比較した定性的および定量的比較が3つの異なる赤外線および可視データセットで実行されます。私たちのコードは、https://github.com/GuYuanjie/Deep-Retinex-fusionで間もなくオープンソースになります。
This study proposes a novel general dataset-free self-supervised learning framework based-on physical model named self-supervised disentangled learning (SDL), and proposes a novel method named Deep Retinex fusion (DRF) which applies SDL framework with generative networks and Retinex theory in infrared and visible images super-resolution fusion. Meanwhile, a generative dual-path fusion network ZipperNet and adaptive fusion loss function Retinex loss are designed for effectively high-quality fusion. The core idea of DRF (based-on SDL) consists of two parts: one is generating components which are disentangled from physical model using generative networks; the other is loss functions which are designed based-on physical relation, and generated components are combined by loss functions in training phase. Furthermore, in order to verify the effectiveness of our proposed DRF, qualitative and quantitative comparisons compared with six state-of-the-art methods are performed on three different infrared and visible datasets. Our code will be open source available soon at https://github.com/GuYuanjie/Deep-Retinex-fusion.
updated: Sun May 08 2022 11:00:53 GMT+0000 (UTC)
published: Mon Dec 06 2021 08:50:47 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト