アーティキュレーションモデルのカテゴリを事前に知る必要なしに、深度画像から直接アーティキュレーションモデルパラメータの分布を効率的に学習する方法を提案します。対照的に、生の観測からアーティキュレーションモデルを学習する既存の方法は、通常、モデルパラメータの点推定のみを予測します。これは、アーティキュレートされたオブジェクトの安全な操作を保証するには不十分です。私たちの中心的な貢献には、ねじ理論、フォンミーゼスフィッシャー分布、およびスティーフェル多様体に基づく剛体変換とアーティキュレーションモデルパラメーターの分布の新しい表現が含まれます。これらの概念を組み合わせることで、剛体の変換とアーティキュレーションが順守しなければならない制約を暗黙的に満たす、効率的で数学的に適切な表現が可能になります。この表現を活用して、新しい深層学習ベースのアプローチであるDUST-netを紹介します。これは、モデルの不確実性を提供しながら、カテゴリに依存しないアーティキュレーションモデルの推定を実行します。いくつかのベンチマークデータセットと実際のオブジェクトでアプローチを評価し、そのパフォーマンスを2つの現在の最先端の方法と比較します。私たちの結果は、DUST-netがアーティキュレーションモデルカテゴリ全体の新規オブジェクトのアーティキュレーションモデルの分布を正常に学習できることを示しています。これにより、最先端の方法よりも高い精度で点推定が生成され、ノイズが多いために予測されたモデルパラメータの不確実性が効果的にキャプチャされます。入力。プロジェクトのウェブページ:https://pearl-utexas.github.io/DUST-net/
We propose a method that efficiently learns distributions over articulation model parameters directly from depth images without the need to know articulation model categories a priori. By contrast, existing methods that learn articulation models from raw observations typically only predict point estimates of the model parameters, which are insufficient to guarantee the safe manipulation of articulated objects. Our core contributions include a novel representation for distributions over rigid body transformations and articulation model parameters based on screw theory, von Mises-Fisher distributions, and Stiefel manifolds. Combining these concepts allows for an efficient, mathematically sound representation that implicitly satisfies the constraints that rigid body transformations and articulations must adhere to. Leveraging this representation, we introduce a novel deep learning based approach, DUST-net, that performs category-independent articulation model estimation while also providing model uncertainties. We evaluate our approach on several benchmarking datasets and real-world objects and compare its performance with two current state-of-the-art methods. Our results demonstrate that DUST-net can successfully learn distributions over articulation models for novel objects across articulation model categories, which generate point estimates with better accuracy than state-of-the-art methods and effectively capture the uncertainty over predicted model parameters due to noisy inputs. Project webpage: https://pearl-utexas.github.io/DUST-net/