arXiv reaDer
HANDAL: ポーズ アノテーション、アフォーダンス、再構成を備えた現実世界の操作可能なオブジェクト カテゴリのデータセット
HANDAL: A Dataset of Real-World Manipulable Object Categories with Pose Annotations, Affordances, and Reconstructions
カテゴリレベルの物体の姿勢推定とアフォーダンス予測のための HANDAL データセットを紹介します。以前のデータセットとは異なり、私たちのデータセットは、ペンチ、調理器具、ドライバーなど、ロボットマニピュレーターによる機能的な把握に適切なサイズと形状を備えたロボット工学対応の操作可能なオブジェクトに焦点を当てています。当社のアノテーション プロセスは合理化されており、既製のカメラ 1 台と半自動処理のみが必要なため、クラウドソーシングを使用せずに高品質の 3D アノテーションを作成できます。このデータセットは、17 カテゴリの 212 個の実世界オブジェクトの 2.2k ビデオからの 308k の注釈付き画像フレームで構成されています。私たちは、ロボットマニピュレーターが単純な押しや無差別な掴みを超えて環境と対話する必要がある実際的なシナリオでの研究を促進するために、ハードウェアとキッチンツールのオブジェクトに焦点を当てています。 6-DoF カテゴリレベルの姿勢とスケールの推定および関連タスクに対するデータセットの有用性を概説します。また、すべてのオブジェクトの 3D 再構成メッシュも提供しており、このようなデータセットのコレクションを民主化するために対処すべきボトルネックのいくつかについて概説します。
We present the HANDAL dataset for category-level object pose estimation and affordance prediction. Unlike previous datasets, ours is focused on robotics-ready manipulable objects that are of the proper size and shape for functional grasping by robot manipulators, such as pliers, utensils, and screwdrivers. Our annotation process is streamlined, requiring only a single off-the-shelf camera and semi-automated processing, allowing us to produce high-quality 3D annotations without crowd-sourcing. The dataset consists of 308k annotated image frames from 2.2k videos of 212 real-world objects in 17 categories. We focus on hardware and kitchen tool objects to facilitate research in practical scenarios in which a robot manipulator needs to interact with the environment beyond simple pushing or indiscriminate grasping. We outline the usefulness of our dataset for 6-DoF category-level pose+scale estimation and related tasks. We also provide 3D reconstructed meshes of all objects, and we outline some of the bottlenecks to be addressed for democratizing the collection of datasets like this one.
updated: Wed Aug 02 2023 23:59:59 GMT+0000 (UTC)
published: Wed Aug 02 2023 23:59:59 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト