オブジェクトのポーズ推定は、ロボットアプリケーションと拡張現実にとって非常に重要です。インスタンスレベルの6Dオブジェクトポーズ推定方法を超えて、カテゴリレベルのポーズと形状を推定することは有望な傾向になっています。そのため、新しい研究分野は、適切に設計されたデータセットによってサポートされる必要があります。コミュニティに高品質のグラウンドトゥルースアノテーションを備えたベンチマークを提供するために、PhoCaLと呼ばれる測光的に困難なオブジェクトを使用したカテゴリレベルのオブジェクトポーズ推定用のマルチモーダルデータセットを導入します。 PhoCaLは、反射率が高く、透明で対称的なオブジェクトを含む、8つのカテゴリにわたる家庭用オブジェクトの60の高品質3Dモデルで構成されています。ロボットがサポートする新しいマルチモーダル(RGB、深度、偏光)データ取得および注釈プロセスを開発しました。不透明なテクスチャ、光沢のある透明なオブジェクトのポーズのサブミリメートルの精度を保証し、モーションブラーがなく、完全なカメラ同期を実現します。データセットのベンチマークを設定するために、最先端のRGB-Dおよび単眼RGBメソッドが、PhoCaLの困難なシーンで評価されます。
Object pose estimation is crucial for robotic applications and augmented reality. Beyond instance level 6D object pose estimation methods, estimating category-level pose and shape has become a promising trend. As such, a new research field needs to be supported by well-designed datasets. To provide a benchmark with high-quality ground truth annotations to the community, we introduce a multimodal dataset for category-level object pose estimation with photometrically challenging objects termed PhoCaL. PhoCaL comprises 60 high quality 3D models of household objects over 8 categories including highly reflective, transparent and symmetric objects. We developed a novel robot-supported multi-modal (RGB, depth, polarisation) data acquisition and annotation process. It ensures sub-millimeter accuracy of the pose for opaque textured, shiny and transparent objects, no motion blur and perfect camera synchronisation. To set a benchmark for our dataset, state-of-the-art RGB-D and monocular RGB methods are evaluated on the challenging scenes of PhoCaL.