歩行は、独自の生体認証機能の1つとして、遠くからでも認識できるという利点があり、公安で広く使用できます。 3D姿勢推定は実際には2D姿勢推定よりも難しいことを考慮して、本論文では2D関節を使用して歩行を認識することを研究し、新しいモデルベースの歩行認識方法JointsGaitを提案して2D人体関節から歩行情報を抽出します。外観ベースの歩行認識アルゴリズムは、以前は普及していました。ただし、外観の特徴には、衣服などの外観の大幅な変動を引き起こす可能性のある外部要因があります。以前のアプローチとは異なり、JointsGaitは最初に、外部要因による干渉が少ない歩行グラフ畳み込みネットワークを使用して、2D関節から時空間特徴を抽出しました。第二に、関節関係ピラミッドマッピング(JRPM)は、人々がさまざまなスケールで歩いているときの人間の関節の関係に従って、生物学的利点を備えた識別可能な特徴空間に時空間歩行特徴をマッピングするために提案されています。最後に、関節の特徴がクロスビューの影響を受けないようにするための融合損失戦略を設計します。私たちの方法は、Kinect Gait BiometryDatasetとCASIA-Bの2つの大きなデータセットで評価されます。 Kinect Gait Biometry Datasetデータベースでは、JointsGaitは対応する関節の2D座標のみを使用しますが、3D関節を使用するモデルベースのアルゴリズムと比較して十分な認識精度を実現します。 CASIA-Bデータベースでは、提案された方法は、すべての歩行条件で高度なモデルベースの方法を大幅に上回り、衣服が人々の外観に深刻な影響を与える場合は、最先端の外観ベースの方法よりも優れています。実験結果は、JointsGaitが低次元の特徴(2Dボディジョイント)にもかかわらず最先端のパフォーマンスを達成し、ビューの変化や衣服の変化による影響が少ないことを示しています。
Gait, as one of unique biometric features, has the advantage of being recognized from a long distance away, can be widely used in public security. Considering 3D pose estimation is more challenging than 2D pose estimation in practice , we research on using 2D joints to recognize gait in this paper, and a new model-based gait recognition method JointsGait is put forward to extract gait information from 2D human body joints. Appearance-based gait recognition algorithms are prevalent before. However, appearance features suffer from external factors which can cause drastic appearance variations, e.g. clothing. Unlike previous approaches, JointsGait firstly extracted spatio-temporal features from 2D joints using gait graph convolutional networks, which are less interfered by external factors. Secondly, Joints Relationship Pyramid Mapping (JRPM) are proposed to map spatio-temporal gait features into a discriminative feature space with biological advantages according to the relationship of human joints when people are walking at various scales. Finally, we design a fusion loss strategy to help the joints features to be insensitive to cross-view. Our method is evaluated on two large datasets, Kinect Gait Biometry Dataset and CASIA-B. On Kinect Gait Biometry Dataset database, JointsGait only uses corresponding 2D coordinates of joints, but achieves satisfactory recognition accuracy compared with those model-based algorithms using 3D joints. On CASIA-B database, the proposed method greatly outperforms advanced model-based methods in all walking conditions, even performs superior to state-of-art appearance-based methods when clothing seriously affect people's appearance. The experimental results demonstrate that JointsGait achieves the state-of-art performance despite the low dimensional feature (2D body joints) and is less affected by the view variations and clothing variation.