ニューラルラディアンスフィールド(NeRF)で使用されるレンダリング手順では、ピクセルごとに1つの光線でシーンをサンプリングするため、トレーニングまたはテスト画像がさまざまな解像度でシーンコンテンツを観察するときに、過度にぼやけたりエイリアスが発生したりするレンダリングが生成される場合があります。ピクセルごとに複数の光線を使用してレンダリングすることによるスーパーサンプリングの簡単なソリューションは、NeRFにとって実用的ではありません。これは、各光線をレンダリングするには多層パーセプトロンを数百回クエリする必要があるためです。 「mip-NeRF」(別名「ミップマップ」)と呼ばれる私たちのソリューションは、NeRFを拡張して、連続的に評価されるスケールでシーンを表現します。 mip-NeRFは、光線の代わりにアンチエイリアシングされた円錐台を効率的にレンダリングすることにより、不快なエイリアシングアーティファクトを減らし、NeRFよりも7%高速で、サイズが半分であると同時に、NeRFの細部を表現する能力を大幅に向上させます。 NeRFと比較して、mip-NeRFは、NeRFで提示されたデータセットで平均エラー率を17%削減し、提示されたそのデータセットの挑戦的なマルチスケールバリアントで60%削減します。 Mip-NeRFは、22倍高速でありながら、マルチスケールデータセットでブルートフォーススーパーサンプリングされたNeRFの精度に匹敵することもできます。
The rendering procedure used by neural radiance fields (NeRF) samples a scene with a single ray per pixel and may therefore produce renderings that are excessively blurred or aliased when training or testing images observe scene content at different resolutions. The straightforward solution of supersampling by rendering with multiple rays per pixel is impractical for NeRF, because rendering each ray requires querying a multilayer perceptron hundreds of times. Our solution, which we call "mip-NeRF" (a la "mipmap"), extends NeRF to represent the scene at a continuously-valued scale. By efficiently rendering anti-aliased conical frustums instead of rays, mip-NeRF reduces objectionable aliasing artifacts and significantly improves NeRF's ability to represent fine details, while also being 7% faster than NeRF and half the size. Compared to NeRF, mip-NeRF reduces average error rates by 17% on the dataset presented with NeRF and by 60% on a challenging multiscale variant of that dataset that we present. Mip-NeRF is also able to match the accuracy of a brute-force supersampled NeRF on our multiscale dataset while being 22x faster.