arXiv reaDer
明示的な解剖学的キーポイント構造制約による 2D 人間姿勢推定
2D Human Pose Estimation with Explicit Anatomical Keypoints Structure Constraints
最近の人間の姿勢推定は、主に人間の特徴抽出器としてより効果的で優れた深いネットワーク構造を設計する方法に焦点を当てており、ほとんどの設計された特徴抽出ネットワークは、トレーニングプロセスを導くために各解剖学的キーポイントの位置を導入するだけです。ただし、一部の人間の解剖学的キーポイントはトポロジの不変性を維持していることがわかりました。これにより、機能マップでキーポイントを検出するときに、より正確に位置を特定することができます。しかし、私たちの知る限り、それを具体的に研究した文献はありません。したがって、この論文では、明示的な解剖学的キーポイント構造制約を使用した新しい 2D 人間の姿勢推定方法を提示します。これは、キーポイント間の距離と方向と、損失オブジェクト。さらに重要なことは、提案されたモデルは、ほとんどの既存のボトムアップまたはトップダウンの人間の姿勢推定方法にプラグインして、そのパフォーマンスを向上させることができます。ベンチマーク データセットである COCO キーポイント データセットでの広範な実験は、特に Lite-HRNet の場合、モデルがプラグインされている場合、その APスコアは、COCO val2017 および test-dev2017 データセットでそれぞれ 2.9% および 3.3% 上昇しました。
Recently, human pose estimation mainly focuses on how to design a more effective and better deep network structure as human features extractor, and most designed feature extraction networks only introduce the position of each anatomical keypoint to guide their training process. However, we found that some human anatomical keypoints kept their topology invariance, which can help to localize them more accurately when detecting the keypoints on the feature map. But to the best of our knowledge, there is no literature that has specifically studied it. Thus, in this paper, we present a novel 2D human pose estimation method with explicit anatomical keypoints structure constraints, which introduces the topology constraint term that consisting of the differences between the distance and direction of the keypoint-to-keypoint and their groundtruth in the loss object. More importantly, our proposed model can be plugged in the most existing bottom-up or top-down human pose estimation methods and improve their performance. The extensive experiments on the benchmark dataset: COCO keypoint dataset, show that our methods perform favorably against the most existing bottom-up and top-down human pose estimation methods, especially for Lite-HRNet, when our model is plugged into it, its AP scores separately raise by 2.9% and 3.3% on COCO val2017 and test-dev2017 datasets.
updated: Mon Dec 05 2022 11:01:43 GMT+0000 (UTC)
published: Mon Dec 05 2022 11:01:43 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト