過去のポーズシーケンスからの人間の動きの予測は、機械知能の多くのアプリケーションの中核です。ただし、現在の最先端の方法では、予測される将来の動きは同じアクティビティ内に限定されます。現在の活動とは異なる予測を生成することも、身体の一部を操作してさまざまな将来の可能性を探求することもできません。間違いなく、これは動き予測の有用性と適用性を大きく制限します。本論文では、予測された動きを調整するために制御パラメータを容易に組み込むことができる人間の動き予測タスクの一般化を提案する。私たちの方法は、アクティビティタイプ全体で操作可能なモーション予測を可能にし、さまざまなきめ細かい方法で人間の動きをカスタマイズできるという点で魅力的です。この目的のために、さまざまな身体部分のローカルGANで構成され、グローバルGANを介して集約されたシンプルで効果的な複合GAN構造が提示されます。ローカルGANは低次元でゲームを行い、グローバルGANはモードの崩壊を回避するために高次元空間で調整します。広範な実験により、私たちの方法が最先端の方法よりも優れていることが示されています。コードはhttps://github.com/herolvkd/AM-GANで入手できます。
Human motion prediction from historical pose sequence is at the core of many applications in machine intelligence. However, in current state-of-the-art methods, the predicted future motion is confined within the same activity. One can neither generate predictions that differ from the current activity, nor manipulate the body parts to explore various future possibilities. Undoubtedly, this greatly limits the usefulness and applicability of motion prediction. In this paper, we propose a generalization of the human motion prediction task in which control parameters can be readily incorporated to adjust the forecasted motion. Our method is compelling in that it enables manipulable motion prediction across activity types and allows customization of the human movement in a variety of fine-grained ways. To this aim, a simple yet effective composite GAN structure, consisting of local GANs for different body parts and aggregated via a global GAN is presented. The local GANs game in lower dimensions, while the global GAN adjusts in high dimensional space to avoid mode collapse. Extensive experiments show that our method outperforms state-of-the-art. The codes are available at https://github.com/herolvkd/AM-GAN.