arXiv reaDer
人間の姿勢推定のための分布を意識した座標表現
Distribution-Aware Coordinate Representation for Human Pose Estimation
  人間の姿勢推定における事実上の標準座標表現である一方で、ヒートマップは、私たちの知る限り、文献で体系的に調査されることはありません。この作業は、ヒートマップに特に焦点を当てた座標表現を調べることにより、このギャップを埋めます。興味深いことに、予測されたヒートマップを元の画像空間の最終的なジョイント座標にデコードするプロセスは、人間のポーズ推定パフォーマンスにとって驚くほど重要であることがわかりました。発見された重要性に照らして、既存の方法で広く使用されている標準の座標復号化方法の設計上の限界をさらに調査し、より原理的な分布認識復号化方法を提案します。一方、不偏モデルトレーニング用の正確なヒートマップ分布を生成することにより、標準の座標エンコードプロセス(つまり、グラウンドトゥルース座標からヒートマップへの変換)を改善します。この2つを組み合わせて、キーポイントの新しい分布認識座標表現(DARK)メソッドを作成します。モデルに依存しないプラグインとして機能するDARKは、さまざまな最先端の人間の姿勢推定モデルのパフォーマンスを大幅に向上させます。広範な実験により、DARKは2つの一般的なベンチマークであるMPIIとCOCOで最良の結果をもたらし、新しい座標表現のアイデアの有用性と有効性を一貫して検証します。
While being the de facto standard coordinate representation in human pose estimation, heatmap is never systematically investigated in the literature, to our best knowledge. This work fills this gap by studying the coordinate representation with a particular focus on the heatmap. Interestingly, we found that the process of decoding the predicted heatmaps into the final joint coordinates in the original image space is surprisingly significant for human pose estimation performance, which nevertheless was not recognised before. In light of the discovered importance, we further probe the design limitations of the standard coordinate decoding method widely used by existing methods, and propose a more principled distribution-aware decoding method. Meanwhile, we improve the standard coordinate encoding process (i.e. transforming ground-truth coordinates to heatmaps) by generating accurate heatmap distributions for unbiased model training. Taking the two together, we formulate a novel Distribution-Aware coordinate Representation of Keypoint (DARK) method. Serving as a model-agnostic plug-in, DARK significantly improves the performance of a variety of state-of-the-art human pose estimation models. Extensive experiments show that DARK yields the best results on two common benchmarks, MPII and COCO, consistently validating the usefulness and effectiveness of our novel coordinate representation idea.
updated: Mon Oct 14 2019 17:03:56 GMT+0000 (UTC)
published: Mon Oct 14 2019 17:03:56 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト