arXiv reaDer
FCPose: 動的インスタンス認識畳み込みを使用した完全畳み込みマルチパーソン ポーズ推定
FCPose: Fully Convolutional Multi-Person Pose Estimation with Dynamic Instance-Aware Convolutions
FCPose と呼ばれる、動的なインスタンス認識畳み込みを使用した完全に畳み込みの複数人の姿勢推定フレームワークを提案します。 ROI (関心領域) 操作および/またはグループ化後処理を必要とすることが多い既存の方法とは異なり、FCPose は、動的インスタンス認識キーポイント推定ヘッドによる ROI およびグループ化後処理を排除します。動的キーポイント ヘッドは、インスタンス (人) ごとに条件付けられており、フィルターの動的に生成された重みでインスタンスの概念をエンコードできます。さらに、動的畳み込みの強力な表現能力により、FCPose のキーポイント ヘッドは非常にコンパクトになるように設計されているため、推論が高速になり、FCPose は画像内の人物の数に関係なく、ほぼ一定の推論時間を持ちます。たとえば、COCO データセットでは、DLA-34 バックボーンを使用する FCPose のリアルタイム バージョンは、マスク R-CNN (ResNet-101) よりも約 4.5 倍高速であると推測し (41.67 FPS 対 9.26FPS)、パフォーマンスの向上を達成しています。また、FCPose は、他の最先端の方法よりも速度と精度のトレードオフが優れています。私たちの実験結果は、FCPose がシンプルで効果的な複数人の姿勢推定フレームワークであることを示しています。コードは https://git.io/AdelaiDet で入手できます。
We propose a fully convolutional multi-person pose estimation framework using dynamic instance-aware convolutions, termed FCPose. Different from existing methods, which often require ROI (Region of Interest) operations and/or grouping post-processing, FCPose eliminates the ROIs and grouping post-processing with dynamic instance-aware keypoint estimation heads. The dynamic keypoint heads are conditioned on each instance (person), and can encode the instance concept in the dynamically-generated weights of their filters. Moreover, with the strong representation capacity of dynamic convolutions, the keypoint heads in FCPose are designed to be very compact, resulting in fast inference and making FCPose have almost constant inference time regardless of the number of persons in the image. For example, on the COCO dataset, a real-time version of FCPose using the DLA-34 backbone infers about 4.5x faster than Mask R-CNN (ResNet-101) (41.67 FPS vs. 9.26FPS) while achieving improved performance. FCPose also offers better speed/accuracy trade-off than other state-of-the-art methods. Our experiment results show that FCPose is a simple yet effective multi-person pose estimation framework. Code is available at: https://git.io/AdelaiDet
updated: Sat May 29 2021 03:24:59 GMT+0000 (UTC)
published: Sat May 29 2021 03:24:59 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト