arXiv reaDer
ハイダイナミックレンジイメージトーンマッピングのための対になっていない学習
Unpaired Learning for High Dynamic Range Image Tone Mapping
ハイダイナミックレンジ(HDR)写真はますます人気が高まっており、DSLRや携帯電話のカメラで利用できるようになっています。ディープニューラルネットワーク(DNN)は、画像操作の他のドメインに大きな影響を与えましたが、トレーニングデータの生成に必要なグラウンドトゥルースソリューションの明確な概念がないため、HDRトーンマッピングへの使用は制限されています。このホワイトペーパーでは、ネイティブLDR画像の視覚的特性を最もよく再現する低ダイナミックレンジ(LDR)レンディションを生成するという明確な目標に基づいて、新しいトーンマッピングアプローチについて説明します。この目標により、HDR画像とLDR画像の関連のないセットに基づいて、対になっていない敵対者のトレーニングを使用できるようになります。どちらも広く利用可能で、簡単に取得できます。この最小限の要件の下で効果的なトレーニングを実現するために、次の新しい手順とコンポーネントを導入します。(i)異なるレベルの曲線ベースの圧縮を推定して適用する範囲正規化前処理、(ii)損失ネットワークがその目標を達成できるようにしながら入力コンテンツを保持し、(iii)ネイティブLDRが持つ低レベルの属性の再現を促進するように設計されたより簡潔な識別ネットワークの使用。結果として得られるネットワークの評価は、フォトリアリスティックなアーティファクトのないトーンマッピング画像を生成する能力と、さまざまな画像忠実度指標および視覚距離での最先端のパフォーマンスを示しています。
High dynamic range (HDR) photography is becoming increasingly popular and available by DSLR and mobile-phone cameras. While deep neural networks (DNN) have greatly impacted other domains of image manipulation, their use for HDR tone-mapping is limited due to the lack of a definite notion of ground-truth solution, which is needed for producing training data. In this paper we describe a new tone-mapping approach guided by the distinct goal of producing low dynamic range (LDR) renditions that best reproduce the visual characteristics of native LDR images. This goal enables the use of an unpaired adversarial training based on unrelated sets of HDR and LDR images, both of which are widely available and easy to acquire. In order to achieve an effective training under this minimal requirements, we introduce the following new steps and components: (i) a range-normalizing pre-process which estimates and applies a different level of curve-based compression, (ii) a loss that preserves the input content while allowing the network to achieve its goal, and (iii) the use of a more concise discriminator network, designed to promote the reproduction of low-level attributes native LDR possess. Evaluation of the resulting network demonstrates its ability to produce photo-realistic artifact-free tone-mapped images, and state-of-the-art performance on different image fidelity indices and visual distances.
updated: Sat Oct 30 2021 09:58:55 GMT+0000 (UTC)
published: Sat Oct 30 2021 09:58:55 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト