3 次元の人間の姿勢推定は、この分野で多くの作業が行われているにもかかわらず、依然として困難な問題です。一般に、ほとんどの方法はニューラル ネットワークを直接使用し、特定の制約 (再投影の制約、関節角度および骨の長さの制約など) を無視します。この論文では、3D 情報と 2D 情報を同時に考慮した、3D 姿勢推定のための弱教師あり GAN ベースのモデルを提案します。このモデルでは、再投影ネットワークを使用して、3D 姿勢から 2D 姿勢への分布のマッピングを学習します。特に、再投影ネットワークと敵対生成ネットワークを同期してトレーニングします。さらに、典型的なキネマティック チェーン スペース (KCS) マトリックスに触発されて、重み付き KCS マトリックスを提案します。これは、関節角度と骨の長さの制約を課すためにディスクリミネーターの入力に追加されます。 Human3.6M での実験結果は、私たちの方法が最先端の方法よりも約 5.1% 優れていることを示しています。
3D human pose estimation is still a challenging problem despite the large amount of work that has been done in this field. Generally, most methods directly use neural networks and ignore certain constraints (e.g., reprojection constraints and joint angle and bone length constraints). This paper proposes a weakly supervised GAN-based model for 3D human pose estimation that considers 3D information along with 2D information simultaneously, in which a reprojection network is employed to learn the mapping of the distribution from 3D poses to 2D poses. In particular, we train the reprojection network and the generative adversarial network synchronously. Furthermore, inspired by the typical kinematic chain space (KCS) matrix, we propose a weighted KCS matrix, which is added into the discriminator's input to impose joint angle and bone length constraints. The experimental results on Human3.6M show that our method outperforms state-of-the-art methods by approximately 5.1%.