arXiv reaDer
レンダリングと比較によるシングルビューロボットのポーズと関節角度の推定
Single-view robot pose and joint angle estimation via render & compare
単一のRGB画像から既知の多関節ロボットの関節角度と6Dカメラからロボットへのポーズを推定する方法であるRoboPoseを紹介します。これは、特に協調ロボティクスのコンテキストで、計装されていない環境で視覚情報のみを使用して他のロボットと対話する機能をモバイルおよび巡回自律システムに付与するための重要な問題です。また、ロボットには多くの自由度と可能な構成の無限のスペースがあり、単一のカメラで画像化すると、自己閉塞や深度のあいまいさが生じることが多いため、これも困難です。この作品の貢献は3つあります。まず、合成データからトレーニングでき、テスト時に新しい見えないロボット構成に一般化し、さまざまなロボットに適用できる、多関節ロボットの6Dポーズと関節角度を推定するための新しいレンダリングと比較のアプローチを紹介します。次に、反復的なポーズ更新のためのロボットのパラメータ化の重要性を実験的に示し、ロボットの構造に依存しないパラメータ化戦略を設計します。最後に、4つの異なるロボットの既存のベンチマークデータセットに関する実験結果を示し、私たちの方法が最先端技術を大幅に上回っていることを示します。コードと事前トレーニング済みモデルは、プロジェクトのWebページhttps://www.di.ens.fr/willow/research/robopose/で入手できます。
We introduce RoboPose, a method to estimate the joint angles and the 6D camera-to-robot pose of a known articulated robot from a single RGB image. This is an important problem to grant mobile and itinerant autonomous systems the ability to interact with other robots using only visual information in non-instrumented environments, especially in the context of collaborative robotics. It is also challenging because robots have many degrees of freedom and an infinite space of possible configurations that often result in self-occlusions and depth ambiguities when imaged by a single camera. The contributions of this work are three-fold. First, we introduce a new render & compare approach for estimating the 6D pose and joint angles of an articulated robot that can be trained from synthetic data, generalizes to new unseen robot configurations at test time, and can be applied to a variety of robots. Second, we experimentally demonstrate the importance of the robot parametrization for the iterative pose updates and design a parametrization strategy that is independent of the robot structure. Finally, we show experimental results on existing benchmark datasets for four different robots and demonstrate that our method significantly outperforms the state of the art. Code and pre-trained models are available on the project webpage https://www.di.ens.fr/willow/research/robopose/.
updated: Mon Apr 19 2021 14:48:29 GMT+0000 (UTC)
published: Mon Apr 19 2021 14:48:29 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト