arXiv reaDer
3D人間ポーズ推定のための同期再投影ベースのモデル
A Synchronized Reprojection-based Model for 3D Human Pose Estimation
この分野で多くの作業が行われているにもかかわらず、3D人間のポーズ推定は依然として困難な問題です。一般に、ほとんどの方法はニューラルネットワークを直接使用し、特定の制約(たとえば、再投影の制約、関節の角度と骨の長さの制約)を無視します。この論文は、3D情報と2D情報を同時に考慮する、3D人間ポーズ推定のための弱教師ありGANベースのモデルを提案します。このモデルでは、再投影ネットワークを使用して、3Dポーズから2Dポーズへの分布のマッピングを学習します。特に、再投影ネットワークと敵対的生成ネットワークを同期的にトレーニングします。さらに、典型的な運動学的チェーン空間(KCS)マトリックスに触発されて、加重KCSマトリックスを提案します。これは、関節角度と骨の長さの制約を課すために弁別器の入力に追加されます。 Human3.6Mでの実験結果は、私たちの方法が最先端の方法を約24.7%上回っていることを示しています。
3D human pose estimation is still a challenging problem despite the large amount of work that has been done in this field. Generally, most methods directly use neural networks and ignore certain constraints (e.g., reprojection constraints and joint angle and bone length constraints). This paper proposes a weakly supervised GAN-based model for 3D human pose estimation that considers 3D information along with 2D information simultaneously, in which a reprojection network is employed to learn the mapping of the distribution from 3D poses to 2D poses. In particular, we train the reprojection network and the generative adversarial network synchronously. Furthermore, inspired by the typical kinematic chain space (KCS) matrix, we propose a weighted KCS matrix, which is added into the discriminator's input to impose joint angle and bone length constraints. The experimental results on Human3.6M show that our method outperforms state-of-the-art methods by approximately 24.7%.
updated: Wed Apr 13 2022 05:03:18 GMT+0000 (UTC)
published: Tue Jun 08 2021 12:11:56 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト