この論文では、6Dオブジェクトポーズ推定の新しいアプローチであるEfficientPoseを紹介します。私たちの方法は、非常に正確で、効率的で、幅広い計算リソースにわたってスケーラブルです。さらに、複数のオブジェクトとインスタンスの2Dバウンディングボックスを検出し、それらの完全な6Dポーズを1回のショットで推定できます。これにより、他のアプローチで問題が発生する複数のオブジェクトを処理する際のランタイムの大幅な増加がなくなります。これらのアプローチは、最初にキーポイントなどの2Dターゲットを検出し、その後、各オブジェクトの6DポーズのPerspective-n-Point問題を解決することを目的としています。また、6D拡張と呼ばれる、パフォーマンスと一般化を改善するための直接6Dポーズ推定アプローチのための新しい拡張方法を提案します。私たちのアプローチは、RGB入力を使用して広く使用されている6Dポーズ推定ベンチマークデータセットLinemodのADD(-S)メトリックに関して、97.35%の新しい最先端の精度を達成しますが、 27FPS以上。複数のオブジェクトとインスタンスの固有の処理、融合されたシングルショット2Dオブジェクト検出、および6Dポーズ推定により、私たちのアプローチは、26 FPSを超える複数のオブジェクト(8)でエンドツーエンドで実行され、多くの人にとって非常に魅力的です。実世界のシナリオ。コードはhttps://github.com/ybkscht/EfficientPoseで公開されます。
In this paper we introduce EfficientPose, a new approach for 6D object pose estimation. Our method is highly accurate, efficient and scalable over a wide range of computational resources. Moreover, it can detect the 2D bounding box of multiple objects and instances as well as estimate their full 6D poses in a single shot. This eliminates the significant increase in runtime when dealing with multiple objects other approaches suffer from. These approaches aim to first detect 2D targets, e.g. keypoints, and solve a Perspective-n-Point problem for their 6D pose for each object afterwards. We also propose a novel augmentation method for direct 6D pose estimation approaches to improve performance and generalization, called 6D augmentation. Our approach achieves a new state-of-the-art accuracy of 97.35% in terms of the ADD(-S) metric on the widely-used 6D pose estimation benchmark dataset Linemod using RGB input, while still running end-to-end at over 27 FPS. Through the inherent handling of multiple objects and instances and the fused single shot 2D object detection as well as 6D pose estimation, our approach runs even with multiple objects (eight) end-to-end at over 26 FPS, making it highly attractive to many real world scenarios. Code will be made publicly available at https://github.com/ybkscht/EfficientPose.