arXiv reaDer
CorNet:再トレーニングなしの新しいオブジェクトの6Dポーズ推定のための汎用3Dコーナー
CorNet: Generic 3D Corners for 6D Pose Estimation of New Objects without Retraining
  カラー画像内のオブジェクトの検出と3Dポーズ推定に対する新しいアプローチを提示します。主な貢献は、新しいオブジェクトのトレーニングフェーズやデータを必要としないことです。一方、最先端の方法では、通常、何時間ものトレーニング時間と数百の登録済み画像のトレーニングが必要です。代わりに、このメソッドはオブジェクトのジオメトリのみに依存しています。私たちの方法は、多数の工業用オブジェクトをカバーする、目立つコーナーを持つオブジェクトに焦点を当てています。最初に、オブジェクトの小さなセットのトレーニング画像を使用して、画像内のさまざまな形状のオブジェクトコーナーを検出し、その3Dポーズを予測することを学びます。特定の画像で新しいオブジェクトを検出するには、最初にCADモデルからコーナーを特定します。また、画像に表示されるコーナーを検出し、それらの3Dポーズを予測します。次に、CADモデルのコーナーを画像で検出された対応物と一致させることで、オブジェクトの3Dポーズを堅牢かつ効率的に検出および推定するRANSACのようなアルゴリズムを導入します。画像のコーナーの3Dポーズも推定するため、オブジェクトのポーズを推定するには1つまたは2つのコーナーのみを検出するだけで十分で、これによりオクルージョンに対してロバストなアプローチが実現します。最終的に、複数のオブジェクトが同じコーナー空間配置を持つ場合、オブジェクトの完全な3Dジオメトリを活用する最終チェックに依存します。私たちのアプローチの利点は、産業のコンテキストにとって特に魅力的であり、挑戦的なT-LESSデータセットでのアプローチを示しています。
We present a novel approach to the detection and 3D pose estimation of objects in color images. Its main contribution is that it does not require any training phases nor data for new objects, while state-of-the-art methods typically require hours of training time and hundreds of training registered images. Instead, our method relies only on the objects' geometries. Our method focuses on objects with prominent corners, which covers a large number of industrial objects. We first learn to detect object corners of various shapes in images and also to predict their 3D poses, by using training images of a small set of objects. To detect a new object in a given image, we first identify its corners from its CAD model; we also detect the corners visible in the image and predict their 3D poses. We then introduce a RANSAC-like algorithm that robustly and efficiently detects and estimates the object's 3D pose by matching its corners on the CAD model with their detected counterparts in the image. Because we also estimate the 3D poses of the corners in the image, detecting only 1 or 2 corners is sufficient to estimate the pose of the object, which makes the approach robust to occlusions. We finally rely on a final check that exploits the full 3D geometry of the objects, in case multiple objects have the same corner spatial arrangement. The advantages of our approach make it particularly attractive for industrial contexts, and we demonstrate our approach on the challenging T-LESS dataset.
updated: Thu Aug 29 2019 21:17:09 GMT+0000 (UTC)
published: Thu Aug 29 2019 21:17:09 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト