arXiv reaDer
HULC:ポーズマニホールドサンプリングと高密度接触ガイダンスを備えた3Dヒューマンモーションキャプチャ
HULC: 3D Human Motion Capture with Pose Manifold Sampling and Dense Contact Guidance
シーンの相互作用を伴うマーカーのない単眼3Dヒューマンモーションキャプチャ(MoCap)は、エクステンデットリアリティ、ロボット工学、仮想アバターの生成に関連する挑戦的な研究トピックです。単眼設定に固有の深さのあいまいさのため、既存の方法でキャプチャされた3Dモーションには、不正確なボディシーンの相互侵入、ジッター、ボディフローティングなどの重大なアーティファクトが含まれることがよくあります。これらの問題に取り組むために、シーンのジオメトリを認識する3D人間モーションキャプチャの新しいアプローチであるHULCを提案します。 HULCは、被写体の絶対尺度だけでなく、3Dの位置特定を改善するために、3Dポーズと高密度の身体環境表面接触を推定します。さらに、誤った身体環境の相互侵入を解決する新しいポーズマニホールドサンプリングに基づく3Dポーズ軌道最適化を紹介します。提案された方法は、既存のシーン認識単眼モーションキャプチャアルゴリズムと比較して構造化された入力を必要としませんが、より物理的に妥当なポーズを生成します。HULCは、さまざまな実験やさまざまなメトリックで既存のアプローチを大幅かつ一貫して上回ります。
Marker-less monocular 3D human motion capture (MoCap) with scene interactions is a challenging research topic relevant for extended reality, robotics and virtual avatar generation. Due to the inherent depth ambiguity of monocular settings, 3D motions captured with existing methods often contain severe artefacts such as incorrect body-scene inter-penetrations, jitter and body floating. To tackle these issues, we propose HULC, a new approach for 3D human MoCap which is aware of the scene geometry. HULC estimates 3D poses and dense body-environment surface contacts for improved 3D localisations, as well as the absolute scale of the subject. Furthermore, we introduce a 3D pose trajectory optimisation based on a novel pose manifold sampling that resolves erroneous body-environment inter-penetrations. Although the proposed method requires less structured inputs compared to existing scene-aware monocular MoCap algorithms, it produces more physically-plausible poses: HULC significantly and consistently outperforms the existing approaches in various experiments and on different metrics.
updated: Tue May 24 2022 10:34:20 GMT+0000 (UTC)
published: Wed May 11 2022 17:59:31 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト