ニューラルラディアンスフィールド(NeRF)は、3Dシーンの表現と新しいビューの合成に大きな可能性を示していますが、推論段階でのNeRFの計算オーバーヘッドは依然として重いです。負担を軽減するために、NeRFの粗いものから細かいものへの階層的なサンプリング手順を掘り下げ、粗いステージをニューラルサンプルフィールドと名付けた軽量モジュールに置き換えることができることを指摘します。提案されたサンプルフィールドは、光線をサンプル分布にマッピングします。サンプル分布は、ポイント座標に変換され、ボリュームレンダリングのために放射輝度フィールドに供給されます。全体的なフレームワークはNeuSampleという名前です。 2つの人気のある3DシーンセットであるRealisticSynthetic 360 ^∘とRealForward-Facingで実験を行い、NeuSampleがNeRFよりも優れたレンダリング品質を実現し、推論速度が速いことを示しています。 NeuSampleは、品質と速度の間のより良いトレードオフに向けて、提案されたサンプルフィールド抽出方法でさらに圧縮されます。
Neural radiance fields (NeRF) have shown great potentials in representing 3D scenes and synthesizing novel views, but the computational overhead of NeRF at the inference stage is still heavy. To alleviate the burden, we delve into the coarse-to-fine, hierarchical sampling procedure of NeRF and point out that the coarse stage can be replaced by a lightweight module which we name a neural sample field. The proposed sample field maps rays into sample distributions, which can be transformed into point coordinates and fed into radiance fields for volume rendering. The overall framework is named as NeuSample. We perform experiments on Realistic Synthetic 360^∘ and Real Forward-Facing, two popular 3D scene sets, and show that NeuSample achieves better rendering quality than NeRF while enjoying a faster inference speed. NeuSample is further compressed with a proposed sample field extraction method towards a better trade-off between quality and speed.