arXiv reaDer
A Benchmark for Gait Recognition under Occlusion Collected by Multi-Kinect SDAS
人間の歩行は、離れた場所での人間の識別にとって重要な生体認証特性の1つです。実際には、閉塞は通常発生し、歩行認識の精度に深刻な影響を及ぼします。しかし、この問題の詳細な研究をサポートするための利用可能なデータベースはなく、最先端の歩行認識方法はそれに十分な注意を払っていないため、この論文では閉塞下の歩行認識に焦点を当てます。 OG RGB + Dデータベースと呼ばれる新しい歩行認識データベースを収集します。これは、他の歩行データベースの制限を打ち破り、複数の同期Azure Kinect DKによるさまざまな閉塞(自己閉塞、アクティブ閉塞、パッシブ閉塞)のマルチモーダル歩行データを含みます。セキュリティ状況にも適用できるセンサーデータ取得システム(マルチKinect SDAS)。 Azure Kinect DKは、さまざまなタイプの歩行認識アルゴリズムをサポートするためにマルチモーダルデータを同時に収集できるため、特にカメラ中心の複数人の3Dポーズを効果的に取得でき、マルチビューはシングルビューよりもオクルージョンを処理するのに適しています。特に、OG RGB + Dデータベースは、閉塞下での人間のポーズ表現でより正確なマルチキネクトによって収集されたデータを融合することにより、正確なシルエットと最適化された人間の3D関節データ(OJ)を提供します。また、OJデータを使用して、高度な3D複数人ポーズ推定モデルをトレーニングし、普遍性のためのオクルージョン下でのポーズ推定の精度を向上させます。また、人間のポーズは人間の外見よりも閉塞の影響を受けにくいため、シャム時空間グラフ畳み込みネットワーク(シャムST-GCN)のフレームワークを使用した人間のデュアルスケルトンモデルに基づく新しい歩行認識方法SkeletonGaitを提案します。評価結果は、SkeletonGaitがOG RGB + Dデータベースおよび一般的なCAISA-Bデータベースでの最先端の歩行認識方法と比較して競争力のあるパフォーマンスを持っていることを示しています。
Human gait is one of important biometric characteristics for human identification at a distance. In practice, occlusion usually occurs and seriously affects accuracy of gait recognition. However, there is no available database to support in-depth research of this problem, and state-of-arts gait recognition methods have not paid enough attention to it, thus this paper focuses on gait recognition under occlusion. We collect a new gait recognition database called OG RGB+D database, which breaks through the limitation of other gait databases and includes multimodal gait data of various occlusions (self-occlusion, active occlusion, and passive occlusion) by our multiple synchronous Azure Kinect DK sensors data acquisition system (multi-Kinect SDAS) that can be also applied in security situations. Because Azure Kinect DK can simultaneously collect multimodal data to support different types of gait recognition algorithms, especially enables us to effectively obtain camera-centric multi-person 3D poses, and multi-view is better to deal with occlusion than single-view. In particular, the OG RGB+D database provides accurate silhouettes and the optimized human 3D joints data (OJ) by fusing data collected by multi-Kinects which are more accurate in human pose representation under occlusion. We also use the OJ data to train an advanced 3D multi-person pose estimation model to improve its accuracy of pose estimation under occlusion for universality. Besides, as human pose is less sensitive to occlusion than human appearance, we propose a novel gait recognition method SkeletonGait based on human dual skeleton model using a framework of siamese spatio-temporal graph convolutional networks (siamese ST-GCN). The evaluation results demonstrate that SkeletonGait has competitive performance compared with state-of-art gait recognition methods on OG RGB+D database and popular CAISA-B database.
updated: Mon Jul 19 2021 16:01:18 GMT+0000 (UTC)
published: Mon Jul 19 2021 16:01:18 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト