arXiv reaDer
グラフに基づくスパース モーション推定によるビデオ ポーズ トラック
Video Pose Track with Graph-Guided Sparse Motion Estimation
この論文では、オクルージョンとモーションブラーの下での複数人の姿勢推定と追跡のための新しいフレームワークを提案します。具体的には、連続するフレームからのグラフ構造の一貫性は、目に見える身体の関節に集中し、目に見える関節を囲むまばらなキーポイントの動きベクトルを推定することによって改善されます。提案されたフレームワークには、3 つのコンポーネントが含まれます。 -姿勢推定器の調整; (ii)階層グラフからノードの可視性スコアを評価するための階層グラフ距離最小化モジュール(HGMM)。ノードの可視性スコアは、そのノードの周りのサンプル数を決定する。 (iii) ID を照合するための複数の履歴フレームの組み合わせ。 HGMM とのグラフ マッチングにより、部分的なオクルージョン下でもより正確な追跡が容易になります。提案されたアプローチは、PoseTrack データセットで最先端のパフォーマンスを達成するだけでなく、人間関連の異常検出の大幅な改善にも貢献します。より高い精度に加えて、提案された SKFEM は、高密度のオプティカル フロー推定よりもはるかに高い効率も示しています。
In this paper, we propose a novel framework for multi-person pose estimation and tracking under occlusions and motion blurs. Specifically, the consistency in graph structures from consecutive frames is improved by concentrating on visible body joints and estimating the motion vectors of sparse key-points surrounding visible joints. The proposed framework involves three components: (i) A Sparse Key-point Flow Estimating Module (SKFEM) for sampling key-points from around body joints and estimating the motion vectors of key-points which contribute to the refinement of body joint locations and fine-tuning of pose estimators; (ii) A Hierarchical Graph Distance Minimizing Module (HGMM) for evaluating the visibility scores of nodes from hierarchical graphs with the visibility score of a node determining the number of samples around that node; and (iii) The combination of multiple historical frames for matching identities. Graph matching with HGMM facilitates more accurate tracking even under partial occlusions. The proposed approach not only achieves state-of-the-art performance on the PoseTrack dataset but also contributes to significant improvements in human-related anomaly detection. Besides a higher accuracy, the proposed SKFEM also shows a much higher efficiency than dense optical flow estimation.
updated: Tue Feb 28 2023 23:56:31 GMT+0000 (UTC)
published: Tue Feb 28 2023 23:56:31 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト