arXiv reaDer
Function4D:非常にまばらな消費者向けRGBDセンサーからのリアルタイムの人間の体積キャプチャ
Function4D: Real-time Human Volumetric Capture from Very Sparse Consumer RGBD Sensors
人間の体積キャプチャは、コンピュータビジョンとコンピュータグラフィックスの長年のトピックです。高度なオフラインシステムを使用して高品質の結果を得ることができますが、特に軽量のセットアップを使用して、複雑なシナリオをリアルタイムで人間の体積でキャプチャすることは依然として困難です。本論文では、時間的体積融合と深い陰関数を組み合わせた人間の体積捕獲法を提案した。高品質で時間的に連続的な再構成を実現するために、トポロジの一貫性とともに隣接する深度観測を融合する動的スライディング融合を提案します。さらに、詳細で完全な表面生成のために、深度入力の幾何学的詳細を保存できるだけでなく、より妥当なテクスチャリング結果を生成できるRGBD入力の詳細保存深い陰関数を提案します。結果と実験は、ビューのスパース性、一般化能力、再構成の品質、および実行時の効率の点で、私たちの方法が既存の方法よりも優れていることを示しています。
Human volumetric capture is a long-standing topic in computer vision and computer graphics. Although high-quality results can be achieved using sophisticated off-line systems, real-time human volumetric capture of complex scenarios, especially using light-weight setups, remains challenging. In this paper, we propose a human volumetric capture method that combines temporal volumetric fusion and deep implicit functions. To achieve high-quality and temporal-continuous reconstruction, we propose dynamic sliding fusion to fuse neighboring depth observations together with topology consistency. Moreover, for detailed and complete surface generation, we propose detail-preserving deep implicit functions for RGBD input which can not only preserve the geometric details on the depth inputs but also generate more plausible texturing results. Results and experiments show that our method outperforms existing methods in terms of view sparsity, generalization capacity, reconstruction quality, and run-time efficiency.
updated: Thu May 06 2021 07:38:27 GMT+0000 (UTC)
published: Wed May 05 2021 04:12:38 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト