arXiv reaDer
Exact-NeRF: ニューラル ラディアンス フィールドの正確なボリューム パラメーター化の調査
Exact-NeRF: An Exploration of a Precise Volumetric Parameterization for Neural Radiance Fields
Neural Radiance Fields (NeRF) は、斬新なシーン ビューを高い精度で合成できるため、大きな注目を集めています。ただし、基本的な定式化に固有のものとして、幅がゼロのレイに沿ったポイントのサンプリングは、最終シーンでのエイリアシングなどのさらなるレンダリング アーティファクトにつながるあいまいな表現になる可能性があります。この問題に対処するために、最近のバリアント mip-NeRF は、円錐視錐台に基づく Integrated Positional Encoding (IPE) を提案しています。これは積分定式化で表現されますが、mip-NeRF はこの積分を多変量ガウス分布の期待値として近似します。この近似は、短い視錐台では信頼できますが、非常に細長い領域では劣化します。これは、より大きな被写界深度の下で遠くのシーン オブジェクトを処理するときに発生します。この論文では、近似円錐ベースの代わりにピラミッドベースの積分定式化を使用して、IPE を計算するための正確なアプローチの使用を検討します。この定式化を Exact-NeRF と呼び、NeRF ドメイン内の IPE に正確な分析ソリューションを提供する最初のアプローチに貢献します。私たちの探索的作業は、そのような正確な定式化 Exact-NeRF が mip-NeRF の精度と一致し、さらに、無制限のシーンの場合など、さらに変更を加えることなく、より困難なシナリオに自然な拡張を提供することを示しています。私たちの貢献は、以前の NeRF 作業における錐台近似のこれまで未踏の問題に対処し、さらに将来の NeRF 拡張における解析ソリューションの潜在的な将来の考慮事項への洞察を提供することを目的としています。
Neural Radiance Fields (NeRF) have attracted significant attention due to their ability to synthesize novel scene views with great accuracy. However, inherent to their underlying formulation, the sampling of points along a ray with zero width may result in ambiguous representations that lead to further rendering artifacts such as aliasing in the final scene. To address this issue, the recent variant mip-NeRF proposes an Integrated Positional Encoding (IPE) based on a conical view frustum. Although this is expressed with an integral formulation, mip-NeRF instead approximates this integral as the expected value of a multivariate Gaussian distribution. This approximation is reliable for short frustums but degrades with highly elongated regions, which arises when dealing with distant scene objects under a larger depth of field. In this paper, we explore the use of an exact approach for calculating the IPE by using a pyramid-based integral formulation instead of an approximated conical-based one. We denote this formulation as Exact-NeRF and contribute the first approach to offer a precise analytical solution to the IPE within the NeRF domain. Our exploratory work illustrates that such an exact formulation Exact-NeRF matches the accuracy of mip-NeRF and furthermore provides a natural extension to more challenging scenarios without further modification, such as in the case of unbounded scenes. Our contribution aims to both address the hitherto unexplored issues of frustum approximation in earlier NeRF work and additionally provide insight into the potential future consideration of analytical solutions in future NeRF extensions.
updated: Sat Mar 25 2023 20:29:00 GMT+0000 (UTC)
published: Tue Nov 22 2022 13:56:33 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト