arXiv reaDer
条件付き拡散を使用した単一イメージの LDR から HDR への変換
Single Image LDR to HDR Conversion using Conditional Diffusion
デジタル イメージングは​​リアルなシーンを再現することを目的としていますが、ロー ダイナミック レンジ (LDR) カメラでは実際のシーンの広いダイナミック レンジを表現できないため、画像が露出不足または露出オーバーになります。この論文では、ハイ ダイナミック レンジ (HDR) 画像を再構築しながら、シャドウとハイライトから複雑な詳細を復元するためのディープ ラーニング ベースのアプローチを紹介します。この問題を画像から画像への (I2I) 変換タスクとして定式化し、分類子を使用しないガイダンスを使用する条件付きノイズ除去拡散確率モデル (DDPM) ベースのフレームワークを提案します。提案したフレームワークにディープ CNN ベースのオートエンコーダーを組み込んで、調整に使用される入力 LDR 画像の潜在表現の品質を向上させます。さらに、露出損失と呼ばれる、LDR-HDR 変換タスク用の新しい損失関数を導入します。この損失により、勾配を飽和の反対方向に導くことができ、結果の品質がさらに向上します。包括的な定量的および定性的な実験を実施することにより、提案した方法の熟練度を効果的に実証しました。この結果は、単純な条件付き拡散ベースの手法が、複雑なカメラ パイプライン ベースのアーキテクチャを置き換えることができることを示しています。
Digital imaging aims to replicate realistic scenes, but Low Dynamic Range (LDR) cameras cannot represent the wide dynamic range of real scenes, resulting in under-/overexposed images. This paper presents a deep learning-based approach for recovering intricate details from shadows and highlights while reconstructing High Dynamic Range (HDR) images. We formulate the problem as an image-to-image (I2I) translation task and propose a conditional Denoising Diffusion Probabilistic Model (DDPM) based framework using classifier-free guidance. We incorporate a deep CNN-based autoencoder in our proposed framework to enhance the quality of the latent representation of the input LDR image used for conditioning. Moreover, we introduce a new loss function for LDR-HDR translation tasks, termed Exposure Loss. This loss helps direct gradients in the opposite direction of the saturation, further improving the results' quality. By conducting comprehensive quantitative and qualitative experiments, we have effectively demonstrated the proficiency of our proposed method. The results indicate that a simple conditional diffusion-based method can replace the complex camera pipeline-based architectures.
updated: Thu Jul 06 2023 07:19:47 GMT+0000 (UTC)
published: Thu Jul 06 2023 07:19:47 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト