arXiv reaDer
スーパーピクセルスープ:複雑な動的シーンの単眼高密度3D再構成
Superpixel Soup: Monocular Dense 3D Reconstruction of a Complex Dynamic Scene
 この作業は、画像からの複雑な動的シーンの高密度3D再構築のタスクに対応しています。このタスクを解決するための一般的なアイデアは、一連のステップで構成され、その実行におけるいくつかのパイプラインの成功に依存しています。既存のアルゴリズムでこのような制限を克服するために、この問題を解決するための統一されたアプローチを提案します。動的なシーンは、各平面が独自のリジッドモーションを享受し、2つのフレーム間のシーンのグローバルな変化が可能な限り剛体(ARAP)である、多数の区分的な平面によって近似できると想定しています。その結果、動的シーンのモデルは、平面構造のスープと、これらの局所平面構造の剛体運動になります。シーンの平面的なオーバーセグメンテーションを使用して、このタスクを「3Dジグソーパズル」問題の解決に減らします。したがって、タスクは、ARAPの仮定の下でシーンのジオメトリに適合する3D形状を構築するために、各剛体を正しく組み立てるために要約されます。さらに、私たちのアプローチは、透視投影下での運動からの構造における固有のスケールあいまいさに対する効果的なソリューションを提供することを示しています。いくつかのベンチマークデータセットに関する広範な実験結果と評価を提供します。競合するアプローチとの定量的比較は、最先端のパフォーマンスを示しています。
This work addresses the task of dense 3D reconstruction of a complex dynamic scene from images. The prevailing idea to solve this task is composed of a sequence of steps and is dependent on the success of several pipelines in its execution. To overcome such limitations with the existing algorithm, we propose a unified approach to solve this problem. We assume that a dynamic scene can be approximated by numerous piecewise planar surfaces, where each planar surface enjoys its own rigid motion, and the global change in the scene between two frames is as-rigid-as-possible (ARAP). Consequently, our model of a dynamic scene reduces to a soup of planar structures and rigid motion of these local planar structures. Using planar over-segmentation of the scene, we reduce this task to solving a "3D jigsaw puzzle" problem. Hence, the task boils down to correctly assemble each rigid piece to construct a 3D shape that complies with the geometry of the scene under the ARAP assumption. Further, we show that our approach provides an effective solution to the inherent scale-ambiguity in structure-from-motion under perspective projection. We provide extensive experimental results and evaluation on several benchmark datasets. Quantitative comparison with competing approaches shows state-of-the-art performance.
updated: Tue Nov 19 2019 20:16:06 GMT+0000 (UTC)
published: Tue Nov 19 2019 20:16:06 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト