arXiv reaDer
キーポイントとパーツアフィニティフィールドを使用した6Dオブジェクトポーズの推定
6D Object Pose Estimation using Keypoints and Part Affinity Fields
RGB画像からの6Dオブジェクトポーズ推定のタスクは、自律型サービスロボットが実世界と対話できるようにするための重要な要件です。この作業では、既知のオブジェクトの6自由度の変換と方向を推定するための2段階のパイプラインを示します。キーポイントとパーツアフィニティフィールド(PAF)は、人間の姿勢推定からOpenPoseCNNアーキテクチャを採用した入力画像から予測されます。次に、オブジェクトのポーズは、PnP-RANSACアルゴリズムを介して、検出されたキーポイントとモデルのキーポイントの間の2D-3D対応から計算されます。提案されたアプローチは、YCB-Videoデータセットで評価され、文献の最近の方法と同等の精度を実現します。 PAFを使用して、検出されたキーポイントをオブジェクトインスタンスにアセンブルすると、ヒートマップのみを使用するよりも有利であることがわかります。単一のオブジェクトクラスのキーポイントを予測するようにトレーニングされたモデルは、複数のクラス用にトレーニングされたモデルよりもパフォーマンスが大幅に向上します。
The task of 6D object pose estimation from RGB images is an important requirement for autonomous service robots to be able to interact with the real world. In this work, we present a two-step pipeline for estimating the 6 DoF translation and orientation of known objects. Keypoints and Part Affinity Fields (PAFs) are predicted from the input image adopting the OpenPose CNN architecture from human pose estimation. Object poses are then calculated from 2D-3D correspondences between detected and model keypoints via the PnP-RANSAC algorithm. The proposed approach is evaluated on the YCB-Video dataset and achieves accuracy on par with recent methods from the literature. Using PAFs to assemble detected keypoints into object instances proves advantageous over only using heatmaps. Models trained to predict keypoints of a single object class perform significantly better than models trained for several classes.
updated: Mon Jul 05 2021 14:41:19 GMT+0000 (UTC)
published: Mon Jul 05 2021 14:41:19 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト