arXiv reaDer
PISEP ^ 2:擬似画像シーケンス進化ベースの3D姿勢予測
PISEP^2: Pseudo Image Sequence Evolution based 3D Pose Prediction
  ポーズ予測は、以前のポーズのウィンドウが与えられた場合に将来のポーズを予測することです。本論文では、3Dジョイント座標シーケンスを使用してポーズを予測する新しい問題を提案します。 Mocapフレームに基づく従来のポーズ予測とは異なり、この問題は、データをキャプチャするためのシンプルなセンサーにより、実際のアプリケーションでの使用に便利です。また、この新しい問題に対処するために、新しいフレームワークPISEP ^ 2(擬似画像シーケンス進化ベースの3D姿勢予測)も紹介します。具体的には、関節座標シーケンスを画像シーケンスに変換することにより、骨格表現を提案します。これにより、異なる関節の異なる相関関係をモデル化できます。この画像ベースの骨格表現を使用して、画像シーケンスの進化としてポーズ予測をモデル化します。さらに、デコーダを非再帰的にデカップリングすることにより、1つのステップですべての将来のポーズを予測するための新しい推論ネットワークが提案されています。再帰シーケンスシーケンスモデルと比較して、計算効率を向上させ、エラーの蓄積を大幅に回避できます。 2つのベンチマークデータセット(G3DとFNTUなど)で広範な実験が実施されています。提案された方法は、両方のデータセットで最先端のパフォーマンスを達成し、提案された方法の有効性を示しています。
Pose prediction is to predict future poses given a window of previous poses. In this paper, we propose a new problem that predicts poses using 3D joint coordinate sequences. Different from the traditional pose prediction based on Mocap frames, this problem is convenient to use in real applications due to its simple sensors to capture data. We also present a new framework, PISEP^2 (Pseudo Image Sequence Evolution based 3D Pose Prediction), to address this new problem. Specifically, a skeletal representation is proposed by transforming the joint coordinate sequence into an image sequence, which can model the different correlations of different joints. With this image based skeletal representation, we model the pose prediction as the evolution of image sequence. Moreover, a novel inference network is proposed to predict all future poses in one step by decoupling the decoders in a non-recursive manner. Compared with the recursive sequence to sequence model, we can improve the computational efficiency and avoid error accumulation significantly. Extensive experiments are carried out on two benchmark datasets (e.g. G3D and FNTU). The proposed method achieves the state-of-the-art performance on both datasets, which demonstrates the effectiveness of our proposed method.
updated: Wed Sep 04 2019 14:10:49 GMT+0000 (UTC)
published: Wed Sep 04 2019 14:10:49 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト