arXiv reaDer
InsPose: Instance-Aware Networks for Single-Stage Multi-Person Pose Estimation
複数人のポーズの推定は、魅力的でやりがいのある作業です。既存の方法は、ほとんどがトップダウンとボトムアップの方法を含む2段階のフレームワークに基づいています。 2段階の方法では、追加の人物検出器の計算の冗長性が高いか、インスタンスに依存しないすべてのキーポイントを予測した後、ヒューリスティックにキーポイントをグループ化する必要があります。シングルステージパラダイムは、複数人のポーズ推定パイプラインを簡素化することを目的としており、多くの注目を集めています。ただし、最近の単一ステージの方法では、単一の特徴ベクトルからさまざまな全身ポーズを回帰することが難しいため、パフォーマンスが低下するという制限があります。複雑なヒューリスティック設計を含む以前のソリューションとは異なり、インスタンス対応の動的ネットワークを採用することにより、シンプルでありながら効果的なソリューションを提供します。具体的には、各インスタンスのネットワークパラメータ(の一部)を適応的に調整するインスタンス対応モジュールを提案します。当社のソリューションは、コンパクトなエンドツーエンドのトレーニング可能なパイプラインを維持しながら、さまざまなポーズを認識するためのネットワークの容量と適応能力を大幅に向上させることができます。 MS-COCOデータセットでの広範な実験は、私たちの方法が既存の1段階の方法よりも大幅に改善され、最先端の2段階のアプローチと比較して精度と効率のバランスが改善されることを示しています。
Multi-person pose estimation is an attractive and challenging task. Existing methods are mostly based on two-stage frameworks, which include top-down and bottom-up methods. Two-stage methods either suffer from high computational redundancy for additional person detectors or they need to group keypoints heuristically after predicting all the instance-agnostic keypoints. The single-stage paradigm aims to simplify the multi-person pose estimation pipeline and receives a lot of attention. However, recent single-stage methods have the limitation of low performance due to the difficulty of regressing various full-body poses from a single feature vector. Different from previous solutions that involve complex heuristic designs, we present a simple yet effective solution by employing instance-aware dynamic networks. Specifically, we propose an instance-aware module to adaptively adjust (part of) the network parameters for each instance. Our solution can significantly increase the capacity and adaptive-ability of the network for recognizing various poses, while maintaining a compact end-to-end trainable pipeline. Extensive experiments on the MS-COCO dataset demonstrate that our method achieves significant improvement over existing single-stage methods, and makes a better balance of accuracy and efficiency compared to the state-of-the-art two-stage approaches.
updated: Tue Jul 20 2021 01:34:59 GMT+0000 (UTC)
published: Mon Jul 19 2021 15:56:09 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト