交差する球に基づく新しいキーポイント投票スキームを提案します。これは、既存のスキームよりも正確であり、より分散したキーポイントのより小さなセットを可能にします。このスキームは、ポイント間の距離に基づいています。これは、1D量が2Dおよび3Dベクトルよりも正確に回帰でき、オフセット量が前の作業で回帰したため、より正確なキーポイントのローカリゼーションが得られます。このスキームは、RGB-Dデータ内の3Dオブジェクトの6自由度ポーズ推定のために提案されたRCVPoseメソッドの基礎を形成します。これは、オクルージョンの処理に特に効果的です。 CNNは、各RGBピクセルの深度モードに対応する3Dポイントと、オブジェクトフレームで定義された3つの分散キーポイントのセットとの間の距離を推定するようにトレーニングされています。推論時に、この推定距離に等しい半径の、各3Dポイントを中心とする球が生成されます。これらの球の表面は、3Dアキュムレータ空間をインクリメントするために投票し、そのピークはキーポイントの位置を示します。提案された放射状投票スキームは、以前のベクトルまたはオフセットスキームよりも正確であり、キーポイントを分散するために堅牢です。実験は、RCVPoseが非常に正確で競争力があり、LINEMOD 99.7%およびYCB-Video 97.2%データセットで最先端の結果を達成し、特に挑戦的なオクルージョンLINEMODで以前の方法よりも+ 7.9%高い(71.1%)スコアを達成することを示していますデータセット。
We propose a novel keypoint voting scheme based on intersecting spheres, that is more accurate than existing schemes and allows for a smaller set of more disperse keypoints. The scheme is based upon the distance between points, which as a 1D quantity can be regressed more accurately than the 2D and 3D vector and offset quantities regressed in previous work, yielding more accurate keypoint localization. The scheme forms the basis of the proposed RCVPose method for 6 DoF pose estimation of 3D objects in RGB-D data, which is particularly effective at handling occlusions. A CNN is trained to estimate the distance between the 3D point corresponding to the depth mode of each RGB pixel, and a set of 3 disperse keypoints defined in the object frame. At inference, a sphere centered at each 3D point is generated, of radius equal to this estimated distance. The surfaces of these spheres vote to increment a 3D accumulator space, the peaks of which indicate keypoint locations. The proposed radial voting scheme is more accurate than previous vector or offset schemes, and is robust to disperse keypoints. Experiments demonstrate RCVPose to be highly accurate and competitive, achieving state-of-the-art results on the LINEMOD 99.7% and YCB-Video 97.2% datasets, notably scoring +7.9% higher (71.1%) than previous methods on the challenging Occlusion LINEMOD dataset.