arXiv reaDer
Deep Fusion Prior for Multi-Focus Image Super Resolution Fusion
この論文は、マルチフォーカス画像融合(MFIF)とブラインド超解像(SR)の問題をマルチフォーカス画像超解像融合(MFISRF)タスクとして統合し、ディープフュージョンプライア(DFP)という名前の新しい統合されたデータセットフリーの教師なしフレームワークを提案します。 )そのようなMFISRFタスクに対処する。 DFPは、SKIPnetネットワーク、DoubleReblurフォーカス測定戦術、決定埋め込みモジュール、および損失関数で構成されています。特に、DFPはエクステントデータセットなしで2つの低解像度入力からのみMFISRFを取得できます。ディープイメージプライアを介して教師なし学習を実装するSKIPnetは、DFPのエンジンとして機能するエンドツーエンドで生成されたネットワークです。 DoubleReblurは、学習せずに、推定されたPSFとガウスカーネルの畳み込みに基づいて一次決定マップを決定するために使用されます。意思決定埋め込みモジュールは、学習を通じて意思決定マップを最適化します。また、コンテンツ損失、ジョイントグラジエント損失、およびグラジエント制限損失で構成されるDFP損失は、高品質のMFISRF結果を確実に取得できます。実験により、提案されたDFPアプローチは、これらの最先端のMFIFとSRメソッドの組み合わせよりも優れていることが証明されています。さらに、DFPは一般的なフレームワークであるため、そのネットワークとフォーカス測定の戦術を継続的に更新して、MFISRFのパフォーマンスをさらに向上させることができます。 DFPコードはオープンソースであり、まもなくで入手できるようになります。
This paper unifies the multi-focus images fusion (MFIF) and blind super resolution (SR) problems as the multi-focus image super resolution fusion (MFISRF) task, and proposes a novel unified dataset-free unsupervised framework named deep fusion prior (DFP) to address such MFISRF task. DFP consists of SKIPnet network, DoubleReblur focus measurement tactic, decision embedding module and loss functions. In particular, DFP can obtain MFISRF only from two low-resolution inputs without any extent dataset; SKIPnet implementing unsupervised learning via deep image prior is an end-to-end generated network acting as the engine of DFP; DoubleReblur is used to determine the primary decision map without learning but based on estimated PSF and Gaussian kernels convolution; decision embedding module optimizes the decision map via learning; and DFP losses composed of content loss, joint gradient loss and gradient limit loss can obtain high-quality MFISRF results robustly. Experiments have proved that our proposed DFP approaches and even outperforms those state-of-art MFIF and SR method combinations. Additionally, DFP is a general framework, thus its networks and focus measurement tactics can be continuously updated to further improve the MFISRF performance. DFP codes are open source and will be available soon at
updated: Tue Oct 12 2021 02:44:07 GMT+0000 (UTC)
published: Tue Oct 12 2021 02:44:07 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト