arXiv reaDer
微分不可能なサンプリングによる微分可能な表面レンダリング
Differentiable Surface Rendering via Non-Differentiable Sampling
明示的表現と暗黙的表現の両方をサポートし、オクルージョン境界で導関数を提供し、実装が高速で簡単な3Dサーフェスの微分可能レンダリングの方法を紹介します。この方法では、最初に微分不可能なラスタライズを使用して表面をサンプリングし、次に微分可能で深度を意識したポイントスプラッティングを適用して最終的な画像を生成します。私たちのアプローチは、微分可能なメッシュ化またはラスタライズのステップを必要としないため、大規模な3Dモデルに効率的であり、陰関数曲面定義から抽出された等値面に適用できます。陰的、メッシュ、およびパラメトリック表面ベースの逆レンダリングおよびニューラルネットワークトレーニングアプリケーションに対する私たちの方法の有効性を示します。特に、神経放射輝度フィールド(NeRF)から抽出された等値面の効率的で微分可能なレンダリングを初めて示し、ボリュームベースではなく表面ベースのNeRFのレンダリングを示します。
We present a method for differentiable rendering of 3D surfaces that supports both explicit and implicit representations, provides derivatives at occlusion boundaries, and is fast and simple to implement. The method first samples the surface using non-differentiable rasterization, then applies differentiable, depth-aware point splatting to produce the final image. Our approach requires no differentiable meshing or rasterization steps, making it efficient for large 3D models and applicable to isosurfaces extracted from implicit surface definitions. We demonstrate the effectiveness of our method for implicit-, mesh-, and parametric-surface-based inverse rendering and neural-network training applications. In particular, we show for the first time efficient, differentiable rendering of an isosurface extracted from a neural radiance field (NeRF), and demonstrate surface-based, rather than volume-based, rendering of a NeRF.
updated: Tue Aug 10 2021 19:25:06 GMT+0000 (UTC)
published: Tue Aug 10 2021 19:25:06 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト