arXiv reaDer
Mip-NeRF 360:無制限のアンチエイリアスニューラル放射輝度フィールド
Mip-NeRF 360: Unbounded Anti-Aliased Neural Radiance Fields
ニューラルラディアンスフィールド(NeRF)は、オブジェクトと空間の小さな境界領域で印象的なビュー合成結果を示しましたが、カメラが任意の方向を指し、コンテンツが任意の距離に存在する可能性がある「境界のない」シーンでは苦労します。この設定では、既存のNeRFのようなモデルは、ぼやけたレンダリングや低解像度のレンダリングを生成することが多く(近くのオブジェクトと遠くのオブジェクトの詳細とスケールが不均衡であるため)、トレーニングが遅く、タスクの固有のあいまいさのためにアーティファクトが発生する可能性があります。小さな画像セットから大きなシーンを再構築します。 mip-NeRF(サンプリングとエイリアシングに対処するNeRFバリアント)の拡張機能を紹介します。これは、非線形シーンのパラメーター化、オンライン蒸留、および新しい歪みベースの正則化を使用して、無制限のシーンによって提示される課題を克服します。カメラがポイントを中心に360度回転するシーンをターゲットとして「mip-NeRF360」を吹き替えたモデルは、mip-NeRFと比較して平均二乗誤差を54%削減し、リアルな合成ビューを生成できます。非常に複雑で制限のない現実世界のシーンの詳細な深度マップ。
Though neural radiance fields (NeRF) have demonstrated impressive view synthesis results on objects and small bounded regions of space, they struggle on "unbounded" scenes, where the camera may point in any direction and content may exist at any distance. In this setting, existing NeRF-like models often produce blurry or low-resolution renderings (due to the unbalanced detail and scale of nearby and distant objects), are slow to train, and may exhibit artifacts due to the inherent ambiguity of the task of reconstructing a large scene from a small set of images. We present an extension of mip-NeRF (a NeRF variant that addresses sampling and aliasing) that uses a non-linear scene parameterization, online distillation, and a novel distortion-based regularizer to overcome the challenges presented by unbounded scenes. Our model, which we dub "mip-NeRF 360" as we target scenes in which the camera rotates 360 degrees around a point, reduces mean-squared error by 54% compared to mip-NeRF, and is able to produce realistic synthesized views and detailed depth maps for highly intricate, unbounded real-world scenes.
updated: Wed Nov 24 2021 18:51:06 GMT+0000 (UTC)
published: Tue Nov 23 2021 18:51:18 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト