中心と曲率の表現に基づく多視点画像からの 6D 姿勢推定のフレームワークである CenDerNet を紹介します。反射するテクスチャのないオブジェクトの正確なポーズを見つけることは、産業用ロボット工学にとって重要な課題です。私たちのアプローチは 3 つの段階で構成されています。まず、完全な畳み込みニューラル ネットワークが各ビューの中心と曲率のヒートマップを予測します。次に、センター ヒートマップを使用してオブジェクト インスタンスを検出し、それらの 3D センターを見つけます。第 3 に、3D 中心と曲率ヒートマップを使用して 6D オブジェクトのポーズが推定されます。レンダリングと比較のアプローチを使用してビュー全体でポーズを共同で最適化することにより、私たちの方法はオクルージョンとオブジェクトの対称性を自然に処理します。 DIMO と T-LESS という 2 つの業界関連データセットで、CenDerNet が以前の方法よりも優れていることを示します。
We introduce CenDerNet, a framework for 6D pose estimation from multi-view images based on center and curvature representations. Finding precise poses for reflective, textureless objects is a key challenge for industrial robotics. Our approach consists of three stages: First, a fully convolutional neural network predicts center and curvature heatmaps for each view; Second, center heatmaps are used to detect object instances and find their 3D centers; Third, 6D object poses are estimated using 3D centers and curvature heatmaps. By jointly optimizing poses across views using a render-and-compare approach, our method naturally handles occlusions and object symmetries. We show that CenDerNet outperforms previous methods on two industry-relevant datasets: DIMO and T-LESS.