arXiv reaDer
DIVeR:ボリュームレンダリングのための決定論的統合を備えたリアルタイムで正確な神経放射輝度フィールド
DIVeR: Real-time and Accurate Neural Radiance Fields with Deterministic Integration for Volume Rendering
DIVeRは、NeRFとそのバリアント(密度モデルとボリュームレンダリング)の主要なアイデアに基づいて構築され、少数の画像からリアルにレンダリングできる3Dオブジェクトモデルを学習します。以前のすべてのNeRFメソッドとは対照的に、DIVeRは、ボリュームレンダリング積分の確率的推定ではなく決定論的推定を使用します。 DIVeRの表現は、ボクセルベースの機能フィールドです。ボリュームレンダリング積分を計算するために、光線はボクセルごとに1つの間隔に分割されます。ボリュームレンダリング積分のコンポーネントは、MLPを使用して各間隔の特徴から推定され、コンポーネントが集約されます。その結果、DIVeRは、他のインテグレーターには見落とされている薄い半透明の構造をレンダリングできます。さらに、DIVeRの表現には、他のそのような方法と比較して比較的公開されているセマンティクスがあります。ボクセル空間内で特徴ベクトルを移動すると、自然な編集が行われます。現在の最先端の方法との広範な定性的および定量的比較は、DIVeRが(1)最先端の品質以上でレンダリングするモデル、(2)ベイク処理せずに非常に小さいモデル、(3)を生成することを示しています。ベイク処理せずに非常に高速にレンダリングし、(4)自然な方法で編集できます。
DIVeR builds on the key ideas of NeRF and its variants -- density models and volume rendering -- to learn 3D object models that can be rendered realistically from small numbers of images. In contrast to all previous NeRF methods, DIVeR uses deterministic rather than stochastic estimates of the volume rendering integral. DIVeR's representation is a voxel based field of features. To compute the volume rendering integral, a ray is broken into intervals, one per voxel; components of the volume rendering integral are estimated from the features for each interval using an MLP, and the components are aggregated. As a result, DIVeR can render thin translucent structures that are missed by other integrators. Furthermore, DIVeR's representation has semantics that is relatively exposed compared to other such methods -- moving feature vectors around in the voxel space results in natural edits. Extensive qualitative and quantitative comparisons to current state-of-the-art methods show that DIVeR produces models that (1) render at or above state-of-the-art quality, (2) are very small without being baked, (3) render very fast without being baked, and (4) can be edited in natural ways.
updated: Fri Nov 19 2021 20:32:59 GMT+0000 (UTC)
published: Fri Nov 19 2021 20:32:59 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト