arXiv reaDer
Pose2Pose:表現力豊かな3D人間のポーズとメッシュ推定のための3D位置ポーズガイド3D回転ポーズ予測
Pose2Pose: 3D Positional Pose-Guided 3D Rotational Pose Prediction for Expressive 3D Human Pose and Mesh Estimation
以前の3D人間のポーズとメッシュの推定方法は、ほとんどの場合、入力画像から人間の関節の3D回転(つまり、3D回転ポーズ)を予測するためにグローバル画像特徴のみに依存しています。ただし、人間の関節の位置に関する局所的な特徴(つまり、位置ポーズ)は、人間の関節を理解するために不可欠な関節固有の情報を提供できます。ローカル機能とグローバル機能の両方を効果的に利用するために、3D位置ポーズガイド3D回転ポーズ予測ネットワークであるPose2Poseと、位置ポーズガイドプーリングおよび関節固有のグラフ畳み込みを紹介します。位置ポーズガイドプーリングは、有用な関節固有のローカルおよびグローバル機能を抽出します。また、関節固有のグラフ畳み込みは、関節固有の特性と異なる関節間のさまざまな関係を学習することにより、関節固有の機能を効果的に処理します。表現力豊かな3D人間のポーズとメッシュの推定に、Pose2Poseを使用し、これまでのすべてのパーツ固有の表現力豊かな方法を大幅に上回っていることを示しています。コードは公開されます。
Previous 3D human pose and mesh estimation methods mostly rely on only global image feature to predict 3D rotations of human joints (i.e., 3D rotational pose) from an input image. However, local features on the position of human joints (i.e., positional pose) can provide joint-specific information, which is essential to understand human articulation. To effectively utilize both local and global features, we present Pose2Pose, a 3D positional pose-guided 3D rotational pose prediction network, along with a positional pose-guided pooling and joint-specific graph convolution. The positional pose-guided pooling extracts useful joint-specific local and global features. Also, the joint-specific graph convolution effectively processes the joint-specific features by learning joint-specific characteristics and different relationships between different joints. We use Pose2Pose for expressive 3D human pose and mesh estimation and show that it outperforms all previous part-specific and expressive methods by a large margin. The codes will be publicly available.
updated: Sat Nov 28 2020 03:30:54 GMT+0000 (UTC)
published: Mon Nov 23 2020 16:48:35 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト