ポーズされた RGBD データからシーンレベルの暗黙的な 3D を予測する方法を学習する
Learning to Predict Scene-Level Implicit 3D from Posed RGBD Data
ポーズをとった RGBD データから 3D 再構成のためのシーンレベルの暗黙関数を予測する方法を学習できる方法を紹介します。テスト時に、私たちのシステムは、暗黙的な関数を介して、以前は表示されていなかった RGB イメージをシーンの 3D 再構成にマッピングします。 3D 再構成のための暗黙的な関数はメッシュに関連付けられることがよくありますが、ポーズをとった RGBD 画像のセットのみを使用して関数をトレーニングできることを示します。この設定は、3D 再構成によって、新しい携帯電話に付属する加速度計 + RGBD データの海を解き放つのに役立つ可能性があります。当社のシステム D2-DRDF は、メッシュ監視を使用する現在の方法に匹敵し、場合によってはそれを上回るパフォーマンスを発揮し、まばらなデータに対して優れた堅牢性を示します。
We introduce a method that can learn to predict scene-level implicit functions for 3D reconstruction from posed RGBD data. At test time, our system maps a previously unseen RGB image to a 3D reconstruction of a scene via implicit functions. While implicit functions for 3D reconstruction have often been tied to meshes, we show that we can train one using only a set of posed RGBD images. This setting may help 3D reconstruction unlock the sea of accelerometer+RGBD data that is coming with new phones. Our system, D2-DRDF, can match and sometimes outperform current methods that use mesh supervision and shows better robustness to sparse data.
updated: Wed Jun 14 2023 17:59:36 GMT+0000 (UTC)
published: Wed Jun 14 2023 17:59:36 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト