arXiv reaDer
部分レベルの SE(3) 等価分散による自己教師ありのカテゴリ レベルの多関節オブジェクトの姿勢推定
Self-Supervised Category-Level Articulated Object Pose Estimation with Part-Level SE(3) Equivariance
カテゴリ レベルの多関節オブジェクト ポーズ推定は、既知のカテゴリから見えない多関節オブジェクトの関節認識オブジェクト ポーズの階層を推定することを目的としています。教師あり学習法に必要な大量の注釈を減らすために、人間のラベルなしでこの問題を解決する新しい自己教師あり戦略を提示します。私たちの重要なアイデアは、部品レベルの同変形状分析を通じて、入力関節形状から正準形状と関節オブジェクトの姿勢を因数分解することです。具体的には、最初に部分レベルの SE(3) 等分散の概念を導入し、そのようなプロパティの機能を学習するネットワークを考案します。次に、慎重に設計されたきめの細かいポーズ形状のもつれを解く戦略により、ポーズ推定をサポートする正規空間が自動的に誘導されると予想されます。したがって、パーツが正規のパーツ空間からカメラ空間にどのように変換されるかを記述するパーツごとの剛体変換として、多関節オブジェクトのポーズをさらに予測できます。広範な実験により、合成および実際の多関節オブジェクト データセットからの完全な点群と部分的な点群の両方に対するこの方法の有効性が実証されています。
Category-level articulated object pose estimation aims to estimate a hierarchy of articulation-aware object poses of an unseen articulated object from a known category. To reduce the heavy annotations needed for supervised learning methods, we present a novel self-supervised strategy that solves this problem without any human labels. Our key idea is to factorize canonical shapes and articulated object poses from input articulated shapes through part-level equivariant shape analysis. Specifically, we first introduce the concept of part-level SE(3) equivariance and devise a network to learn features of such property. Then, through a carefully designed fine-grained pose-shape disentanglement strategy, we expect that canonical spaces to support pose estimation could be induced automatically. Thus, we could further predict articulated object poses as per-part rigid transformations describing how parts transform from their canonical part spaces to the camera space. Extensive experiments demonstrate the effectiveness of our method on both complete and partial point clouds from synthetic and real articulated object datasets.
updated: Tue Feb 28 2023 03:02:11 GMT+0000 (UTC)
published: Tue Feb 28 2023 03:02:11 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト