arXiv reaDer
マルチパーソンエクストリームモーション予測
Multi-Person Extreme Motion Prediction
人間の動きの予測は、過去の3Dスケルトンのシーケンスを前提として将来のポーズを予測することを目的としています。この問題は最近ますます注目を集めていますが、それは主に一人の人間のために単独で取り組まれています。この論文では、共同作業を行う人間を扱うときにこの問題を調査し、過去の骨格の2つのシーケンスが与えられた2人の相互作用する人の将来の動きを予測しようとします。両方の人の履歴情報を活用し、2つのポーズシーケンス間の相互依存関係を予測することを学習する新しい相互作用注意メカニズムを提案します。このようなインタラクティブな状況をトレーニングするためのデータセットが利用できないため、リンディホップダンスアクションを実行するプロのダンサーの新しいラボベースの人物インタラクションデータセットであるExPI(Extreme Pose Interaction)を収集しました。これには、3Dボディポーズで注釈が付けられた30Kフレームの115シーケンスが含まれています。と形。 ExPIで相互作用ネットワークを徹底的に評価し、短期および長期の予測の両方で、独身者の動きを予測するための最先端の方法を一貫して上回っていることを示しています。
Human motion prediction aims to forecast future poses given a sequence of past 3D skeletons. While this problem has recently received increasing attention, it has mostly been tackled for single humans in isolation. In this paper, we explore this problem when dealing with humans performing collaborative tasks, we seek to predict the future motion of two interacted persons given two sequences of their past skeletons. We propose a novel cross interaction attention mechanism that exploits historical information of both persons, and learns to predict cross dependencies between the two pose sequences. Since no dataset to train such interactive situations is available, we collected ExPI (Extreme Pose Interaction), a new lab-based person interaction dataset of professional dancers performing Lindy-hop dancing actions, which contains 115 sequences with 30K frames annotated with 3D body poses and shapes. We thoroughly evaluate our cross interaction network on ExPI and show that both in short- and long-term predictions, it consistently outperforms state-of-the-art methods for single-person motion prediction.
updated: Fri Nov 26 2021 17:59:34 GMT+0000 (UTC)
published: Tue May 18 2021 20:52:05 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト