arXiv reaDer
PVN3D: A Deep Point-wise 3D Keypoints Voting Network for 6DoF Pose Estimation
 この作業では、単一のRGBD画像からロバストな6DoFオブジェクトポーズを推定するための新しいデータ駆動型メソッドを紹介します。ポーズパラメータを直接回帰する以前の方法とは異なり、キーポイントベースのアプローチでこの困難なタスクに取り組みます。具体的には、オブジェクトの3Dキーポイントを検出し、最小二乗法で6Dポーズパラメータを推定するディープハフ投票ネットワークを提案します。私たちの方法は、RGBベースの6DoF推定に成功する2Dキーポイントアプローチの自然な拡張です。これにより、追加の深度情報を使用して剛体オブジェクトの幾何学的制約を完全に利用でき、ネットワークが簡単に学習および最適化できます。 6D姿勢推定タスクにおける3Dキーポイント検出の有効性を実証するために、広範な実験が行われました。実験結果はまた、いくつかのベンチマークで大幅なマージンにより、私たちのメソッドが最先端のメソッドよりも優れていることを示しています。コードとビデオはで入手できます。
In this work, we present a novel data-driven method for robust 6DoF object pose estimation from a single RGBD image. Unlike previous methods that directly regressing pose parameters, we tackle this challenging task with a keypoint-based approach. Specifically, we propose a deep Hough voting network to detect 3D keypoints of objects and then estimate the 6D pose parameters within a least-squares fitting manner. Our method is a natural extension of 2D-keypoint approaches that successfully work on RGB based 6DoF estimation. It allows us to fully utilize the geometric constraint of rigid objects with the extra depth information and is easy for a network to learn and optimize. Extensive experiments were conducted to demonstrate the effectiveness of 3D-keypoint detection in the 6D pose estimation task. Experimental results also show our method outperforms the state-of-the-art methods by large margins on several benchmarks. Code and video are available at
updated: Tue Mar 24 2020 10:16:31 GMT+0000 (UTC)
published: Mon Nov 11 2019 13:13:21 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト