arXiv reaDer
DeepSSM:3D人間の動きを予測するための深い状態空間モデル
DeepSSM: Deep State-Space Model for 3D Human Motion Prediction
将来の人間の動きを予測することは、さまざまな実際のアプリケーションの人間と機械の相互作用において重要な役割を果たします。この論文では、将来の人間の動きを予測するために、深い状態空間モデルであるDeepSSMを構築します。具体的には、人間の運動システムを動的システムの状態空間モデルとして定式化し、状態空間理論によって運動システムをモデル化し、多様な人間の運動システムの統一された定式化を提供します。さらに、このシステムを構築するために新しいディープネットワークが設計されており、ディープネットワークと状態空間モデルの両方の利点を活用できます。ディープネットワークは、人間の運動システムの状態状態遷移と状態観察遷移の両方のプロセスを共同でモデル化し、モデルの状態観察遷移を介して複数の将来のポーズを再帰的に生成できます。システムのモデリング能力を向上させるために、独自の損失関数であるATPL(Attention Temporal Prediction Loss)が導入され、モデルが最適化され、初期のタイムステップに注意を払うことで、システムがより正確な予測を実現できるようになります。 2つのベンチマークデータセット(つまり、Human3.6Mと3DPW)での実験により、私たちの方法が改善された効果で最先端のパフォーマンスを達成することが確認されました。論文が受理されれば、コードが利用可能になります。
Predicting future human motion plays a significant role in human-machine interactions for a variety of real-life applications. In this paper, we build a deep state-space model, DeepSSM, to predict future human motion. Specifically, we formulate the human motion system as the state-space model of a dynamic system and model the motion system by the state-space theory, offering a unified formulation for diverse human motion systems. Moreover, a novel deep network is designed to build this system, enabling us to utilize both the advantages of deep network and state-space model. The deep network jointly models the process of both the state-state transition and the state-observation transition of the human motion system, and multiple future poses can be generated via the state-observation transition of the model recursively. To improve the modeling ability of the system, a unique loss function, ATPL (Attention Temporal Prediction Loss), is introduced to optimize the model, encouraging the system to achieve more accurate predictions by paying increasing attention to the early time-steps. The experiments on two benchmark datasets (i.e., Human3.6M and 3DPW) confirm that our method achieves state-of-the-art performance with improved effectiveness. The code will be available if the paper is accepted.
updated: Sun Dec 13 2020 08:02:44 GMT+0000 (UTC)
published: Mon May 25 2020 15:06:12 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト