arXiv reaDer
深い補償展開ネットワークによる低照度ライトフィールド画像の強化
Enhancing Low-light Light Field Images with A Deep Compensation Unfolding Network
この論文では、低照度条件下で撮影されたライト フィールド (LF) 画像を復元するための、ディープ コンペンセーション アンフォールディング ネットワーク (DCUNet) と呼ばれる、新規で解釈可能なエンドツーエンド学習フレームワークを紹介します。 DCUNet は、データ駆動型の方法で逆結像問題を解く最適化プロセスを模倣するマルチステージ アーキテクチャで設計されています。フレームワークは、中間の強化結果を使用して照明マップを推定し、それを展開プロセスで使用して新しい強化結果を生成します。さらに、DCUNet には、ノイズとイルミネーション マップの推定エラーを抑制するために、各最適化ステージにコンテンツ関連の深い補償モジュールが含まれています。 LF 画像の固有の特性を適切にマイニングして活用するために、この論文では、LF 画像内の冗長情報を包括的に活用する擬似明示的特徴インタラクション モジュールを提案します。シミュレートされたデータセットと実際のデータセットの両方での実験結果は、定性的および定量的の両方で、最先端の手法に対する DCUNet の優位性を示しています。さらに、DCUNet は、強化された LF 画像の重要な幾何学的構造をより適切に保存します。コードは https://github.com/lyuxianqiang/LFLL-DCU で公開されます。
This paper presents a novel and interpretable end-to-end learning framework, called the deep compensation unfolding network (DCUNet), for restoring light field (LF) images captured under low-light conditions. DCUNet is designed with a multi-stage architecture that mimics the optimization process of solving an inverse imaging problem in a data-driven fashion. The framework uses the intermediate enhanced result to estimate the illumination map, which is then employed in the unfolding process to produce a new enhanced result. Additionally, DCUNet includes a content-associated deep compensation module at each optimization stage to suppress noise and illumination map estimation errors. To properly mine and leverage the unique characteristics of LF images, this paper proposes a pseudo-explicit feature interaction module that comprehensively exploits redundant information in LF images. The experimental results on both simulated and real datasets demonstrate the superiority of our DCUNet over state-of-the-art methods, both qualitatively and quantitatively. Moreover, DCUNet preserves the essential geometric structure of enhanced LF images much better. The code will be publicly available at https://github.com/lyuxianqiang/LFLL-DCU.
updated: Sat Jan 13 2024 11:18:10 GMT+0000 (UTC)
published: Thu Aug 10 2023 07:53:06 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト