arXiv reaDer
ニューラルリライト可能な参加型メディアレンダリング
Neural Relightable Participating Media Rendering
シーンの神経放射輝度フィールドを学習することで、最近、シーンのリアルな斬新なビュー合成が可能になりましたが、元の固定照明条件下での画像の合成に限定されています。したがって、再照明、シーン編集、シーン構成など、熱心に望まれるタスクには柔軟ではありません。この問題に取り組むために、いくつかの最近の方法は、放射輝度場から反射率と照明を解きほぐすことを提案している。これらの方法は、表面が不透明な固体オブジェクトに対処できますが、参加するメディアは無視されます。また、直接照明のみ、または最大で1バウンスの間接照明のみを考慮しているため、高次の間接照明を無視することによるエネルギー損失に悩まされます。グローバルイルミネーションの完全なシミュレーションを使用して、参加メディアの心象表現を学習することを提案します。レイトレーシングを介して直接照明を推定し、球面調和関数を使用して間接照明を計算します。私たちのアプローチは、長い間接バウンスの計算を回避し、エネルギー損失の影響を受けません。複数のシーンでの実験は、私たちのアプローチが最先端の方法と比較して優れた視覚的品質と数値性能を達成し、不透明な表面を持つ固体オブジェクトを処理するために一般化できることを示しています。
Learning neural radiance fields of a scene has recently allowed realistic novel view synthesis of the scene, but they are limited to synthesize images under the original fixed lighting condition. Therefore, they are not flexible for the eagerly desired tasks like relighting, scene editing and scene composition. To tackle this problem, several recent methods propose to disentangle reflectance and illumination from the radiance field. These methods can cope with solid objects with opaque surfaces but participating media are neglected. Also, they take into account only direct illumination or at most one-bounce indirect illumination, thus suffer from energy loss due to ignoring the high-order indirect illumination. We propose to learn neural representations for participating media with a complete simulation of global illumination. We estimate direct illumination via ray tracing and compute indirect illumination with spherical harmonics. Our approach avoids computing the lengthy indirect bounces and does not suffer from energy loss. Our experiments on multiple scenes show that our approach achieves superior visual quality and numerical performance compared to state-of-the-art methods, and it can generalize to deal with solid objects with opaque surfaces as well.
updated: Mon Oct 25 2021 14:36:15 GMT+0000 (UTC)
published: Mon Oct 25 2021 14:36:15 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト