Neural Radiance Fields (NeRF) は、ポーズをとった一連のカメラ画像が与えられた場合に、写真のようにリアルな 3D 再構成と斬新なビュー合成における印象的な機能により、最近かなりの注目を集めています。初期の作業では、通常、入力画像が高品質であると想定されています。ただし、画像の劣化 (暗い場所での画像の動きのぼやけなど) は、現実世界のシナリオで簡単に発生する可能性があり、NeRF のレンダリング品質にさらに影響を与える可能性があります。このホワイト ペーパーでは、深刻なモーション ブラー画像や不正確なカメラ ポーズに対してロバストな新しいバンドル調整ブレ除去ニューラル ラディアンス フィールド (BAD-NeRF) を紹介します。私たちのアプローチは、モーションブラーされた画像の物理的な画像形成プロセスをモデル化し、NeRF のパラメーターを共同で学習し、露光時間中のカメラの動きの軌跡を復元します。実験では、実際の物理的な画像形成プロセスを直接モデル化することにより、BAD-NeRF が合成データセットと実際のデータセットの両方で以前の作業よりも優れたパフォーマンスを達成することを示しています。
Neural Radiance Fields (NeRF) have received considerable attention recently, due to its impressive capability in photo-realistic 3D reconstruction and novel view synthesis, given a set of posed camera images. Earlier work usually assumes the input images are in good quality. However, image degradation (e.g. image motion blur in low-light conditions) can easily happen in real-world scenarios, which would further affect the rendering quality of NeRF. In this paper, we present a novel bundle adjusted deblur Neural Radiance Fields (BAD-NeRF), which can be robust to severe motion blurred images and inaccurate camera poses. Our approach models the physical image formation process of a motion blurred image, and jointly learns the parameters of NeRF and recovers the camera motion trajectories during exposure time. In experiments, we show that by directly modeling the real physical image formation process, BAD-NeRF achieves superior performance over prior works on both synthetic and real datasets.