arXiv reaDer
Bio-LSTM: A Biomechanically Inspired Recurrent Neural Network for 3D Pedestrian Pose and Gait Prediction
  自動運転などのアプリケーションでは、歩行者の意図と将来の行動を理解、推測、予測することが重要です。この機能により、車両は衝突を避け、乗り心地と品質を向上させることができます。本論文では、3Dの姿勢と不正確な前のフレームで推定された位置を前提として、グローバル座標フレームで歩行者の位置と3Dの関節運動体の姿勢を予測できる、生体力学にヒントを得たリカレントニューラルネットワーク(Bio-LSTM)を提案します。提案されたネットワークは、カメラから最大45メートルの歩行者(都市交差点スケール)に対して、複数の歩行者のポーズとグローバルな位置を同時に予測することができます。提案されたネットワークの出力は、Skinned Multi-Person Linear(SMPL)モデルパラメーターで表される全身3Dメッシュです。提案されたアプローチは、人間の歩行(歩行)の周期性、人体の鏡面対称性、および人間の歩行サイクルにおける地面反力の変化を取り入れた新しい目的関数に依存しています。このホワイトペーパーでは、PedXデータセットの予測結果を示します。これは、歩行者の多い交通量のある実際の都市交差点で収集された大規模で野生のデータセットです。結果は、提案されたネットワークが歩行者の歩行の特性を正常に学習し、正確で一貫した3D姿勢予測を生成できることを示しています。
In applications such as autonomous driving, it is important to understand, infer, and anticipate the intention and future behavior of pedestrians. This ability allows vehicles to avoid collisions and improve ride safety and quality. This paper proposes a biomechanically inspired recurrent neural network (Bio-LSTM) that can predict the location and 3D articulated body pose of pedestrians in a global coordinate frame, given 3D poses and locations estimated in prior frames with inaccuracy. The proposed network is able to predict poses and global locations for multiple pedestrians simultaneously, for pedestrians up to 45 meters from the cameras (urban intersection scale). The outputs of the proposed network are full-body 3D meshes represented in Skinned Multi-Person Linear (SMPL) model parameters. The proposed approach relies on a novel objective function that incorporates the periodicity of human walking (gait), the mirror symmetry of the human body, and the change of ground reaction forces in a human gait cycle. This paper presents prediction results on the PedX dataset, a large-scale, in-the-wild data set collected at real urban intersections with heavy pedestrian traffic. Results show that the proposed network can successfully learn the characteristics of pedestrian gait and produce accurate and consistent 3D pose predictions.
updated: Fri Sep 13 2019 15:28:14 GMT+0000 (UTC)
published: Tue Sep 11 2018 07:11:32 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト