arXiv reaDer
Single-Stage Multi-Person Pose Machines
  複数人のポーズの推定は難しい問題です。既存の方法は、主に2段階に基づいており、1段階は提案の生成、もう1段階は対応する人物にポーズを割り当てるための段階です。ただし、このような2段階の方法では、一般に効率が低下します。この作業では、パイプラインを簡素化し、複数人のポーズ推定の効率を上げるために、最初のシングルステージモデルであるシングルステージマルチパーソンポーズマシン(SPM)を紹介します。これを達成するために、人のインスタンスと体の関節の位置表現を統合する新しい構造化ポーズ表現(SPR)を提案します。 SPRに基づいて、単一ステージで複数の人の構造化されたポーズを直接予測できるSPMモデルを開発し、2ステージ方式よりもコンパクトなパイプラインと魅力的な効率の利点を提供します。特に、SPRは異なる人のインスタンスを示すためにルートジョイントを導入し、人体のジョイント位置は変位w.r.tにエンコードされます。ルーツ。一部のジョイントの長距離変位をより正確に予測するために、SPRは階層表現にさらに拡張されています。 SPRに基づいて、SPMは、CNNを介してルートジョイント(インスタンスの場所)と体の関節の変位を同時に予測することにより、複数人のポーズの推定を効率的に実行できます。さらに、SPMの一般性を示すために、複数人の3D姿勢推定にも適用します。ベンチマークMPII、拡張PASCAL-Person-Part、MSCOCO、CMU Panopticの包括的な実験により、複数人の2D / 3Dポーズ推定のためのSPMの最先端の効率と優れた精度が明確に示されています。
Multi-person pose estimation is a challenging problem. Existing methods are mostly two-stage based--one stage for proposal generation and the other for allocating poses to corresponding persons. However, such two-stage methods generally suffer low efficiency. In this work, we present the first single-stage model, Single-stage multi-person Pose Machine (SPM), to simplify the pipeline and lift the efficiency for multi-person pose estimation. To achieve this, we propose a novel Structured Pose Representation (SPR) that unifies person instance and body joint position representations. Based on SPR, we develop the SPM model that can directly predict structured poses for multiple persons in a single stage, and thus offer a more compact pipeline and attractive efficiency advantage over two-stage methods. In particular, SPR introduces the root joints to indicate different person instances and human body joint positions are encoded into their displacements w.r.t. the roots. To better predict long-range displacements for some joints, SPR is further extended to hierarchical representations. Based on SPR, SPM can efficiently perform multi-person poses estimation by simultaneously predicting root joints (location of instances) and body joint displacements via CNNs. Moreover, to demonstrate the generality of SPM, we also apply it to multi-person 3D pose estimation. Comprehensive experiments on benchmarks MPII, extended PASCAL-Person-Part, MSCOCO and CMU Panoptic clearly demonstrate the state-of-the-art efficiency of SPM for multi-person 2D/3D pose estimation, together with outstanding accuracy.
updated: Sat Aug 24 2019 22:05:51 GMT+0000 (UTC)
published: Sat Aug 24 2019 22:05:51 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト