arXiv reaDer
自己監視カテゴリレベルのオブジェクトポーズ推定のためのSE(3)同変写像の活用
Leveraging SE(3) Equivariance for Self-Supervised Category-Level Object Pose Estimation
カテゴリレベルのオブジェクトポーズ推定は、オブジェクトCADモデルにアクセスせずに、既知のカテゴリから以前に表示されなかったオブジェクトインスタンスの6Dオブジェクトポーズを見つけることを目的としています。カテゴリレベルの学習に必要な膨大な量のポーズ注釈を減らすために、単一の3D点群からカテゴリレベルの6Dオブジェクトポーズを推定する自己監視学習フレームワークを初めて提案します。トレーニング中、私たちの方法は地面を想定していません。真実のポーズの注釈、CADモデル、およびマルチビュー監視はありません。私たちの方法の鍵は、SE(3)同変点群ネットワークによって強化された不変形状再構成モジュールと同変ポーズ推定モジュールを介して形状とポーズを解きほぐすことです。不変形状再構成モジュールは、整列された再構成を実行することを学習し、カテゴリを生成します-注釈を使用せずにレベル参照フレーム。さらに、同変ポーズ推定モジュールは、完全に監視されたいくつかの方法に匹敵するカテゴリレベルのポーズ推定精度を実現します。広範な実験により、ModelNet40ベンチマークの完全な深度点群と部分的な深度点群の両方、およびNOCS-REAL275データセットの実際の深度点群に対するアプローチの有効性が実証されています。コードと視覚化を含むプロジェクトページは、https://dragonlong.github.io/equi-poseにあります。
Category-level object pose estimation aims to find 6D object poses of previously unseen object instances from known categories without access to object CAD models. To reduce the huge amount of pose annotations needed for category-level learning, we propose for the first time a self-supervised learning framework to estimate category-level 6D object pose from single 3D point clouds.During training, our method assumes no ground-truth pose annotations, no CAD models, and no multi-view supervision. The key to our method is to disentangle shape and pose through an invariant shape reconstruction module and an equivariant pose estimation module, empowered by SE(3) equivariant point cloud networks.The invariant shape reconstruction module learns to perform aligned reconstructions, yielding a category-level reference frame without using any annotations. In addition, the equivariant pose estimation module achieves category-level pose estimation accuracy that is comparable to some fully supervised methods. Extensive experiments demonstrate the effectiveness of our approach on both complete and partial depth point clouds from the ModelNet40 benchmark, and on real depth point clouds from the NOCS-REAL 275 dataset. The project page with code and visualizations can be found at: https://dragonlong.github.io/equi-pose.
updated: Sat Oct 30 2021 06:46:44 GMT+0000 (UTC)
published: Sat Oct 30 2021 06:46:44 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト