arXiv reaDer
SILT:暗黙的な画像分解を使用した自己監視照明転送
SILT: Self-supervised Lighting Transfer Using Implicit Image Decomposition
自己監視型の暗黙的な照明転送方法であるSILTを紹介します。シーンの再照明に関する以前の研究とは異なり、特定のシーンに任意の新しい照明構成を適用しようとはしていません。代わりに、他のシーンのデータベースから照明スタイルを転送して、入力に関係なく均一な照明スタイルを提供したいと考えています。このソリューションは、任意の照明スタイルの入力画像を統合ドメインにマッピングすることを最初に目的とする2分岐ネットワークとして動作し、暗黙的な画像分解によって追加のガイダンスが実現されます。次に、生成された出力とスタイル参照、つまり目的の照明条件の画像が表示されるディスクリミネーターを使用して、この統合された入力ドメインを再マッピングします。私たちの方法は、照明の監視を必要とせずに、2つの異なるデータセット全体で監視された再照明ソリューションよりも優れていることが示されています。
We present SILT, a Self-supervised Implicit Lighting Transfer method. Unlike previous research on scene relighting, we do not seek to apply arbitrary new lighting configurations to a given scene. Instead, we wish to transfer the lighting style from a database of other scenes, to provide a uniform lighting style regardless of the input. The solution operates as a two-branch network that first aims to map input images of any arbitrary lighting style to a unified domain, with extra guidance achieved through implicit image decomposition. We then remap this unified input domain using a discriminator that is presented with the generated outputs and the style reference, i.e. images of the desired illumination conditions. Our method is shown to outperform supervised relighting solutions across two different datasets without requiring lighting supervision.
updated: Tue Mar 15 2022 12:29:42 GMT+0000 (UTC)
published: Mon Oct 25 2021 12:52:53 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト