高度に制約された操作タスクは、通常1mm未満の高レベルの精度を必要とするため、自律型ロボットにとって引き続き困難です。これは、従来の知覚システムで達成できるものと互換性がないことがよくあります。このホワイトペーパーでは、最先端のオブジェクトトラッキングとパッシブアダプティブメカニカルハードウェアの組み合わせを活用して、産業に関連する厳しい公差(0.25mm)で精密な操作タスクを完了することができることを示しています。提案された制御方法は、関連するワークスペース内のオブジェクトの相対的な6Dポーズを追跡することにより、視覚を通してループを閉じます。準拠マニピュレータと手の両方の制御参照を調整して、手内操作を介してオブジェクト挿入タスクを完了します。以前の挿入の取り組みとは異なり、私たちの方法では、高価な力センサー、精密マニピュレーター、またはデータを大量に消費する時間のかかるオンライン学習は必要ありません。代わりに、この取り組みは機械的コンプライアンスを活用し、オフラインで学習した手のオブジェクトにとらわれない操作モデル、既製のモーションプランニング、および合成データのみでトレーニングされたRGBDベースのオブジェクトトラッカーを利用します。これらの機能により、提案されたシステムを簡単に一般化し、新しいタスクや環境に移行することができます。このホワイトペーパーでは、システムコンポーネントについて詳しく説明し、さまざまな形状の厳しい公差のペグインホール挿入タスクとオープンワールドの制約付き配置タスクを含む広範な実験でその有効性を示します。
Highly constrained manipulation tasks continue to be challenging for autonomous robots as they require high levels of precision, typically less than 1mm, which is often incompatible with what can be achieved by traditional perception systems. This paper demonstrates that the combination of state-of-the-art object tracking with passively adaptive mechanical hardware can be leveraged to complete precision manipulation tasks with tight, industrially-relevant tolerances (0.25mm). The proposed control method closes the loop through vision by tracking the relative 6D pose of objects in the relevant workspace. It adjusts the control reference of both the compliant manipulator and the hand to complete object insertion tasks via within-hand manipulation. Contrary to previous efforts for insertion, our method does not require expensive force sensors, precision manipulators, or time-consuming, online learning, which is data hungry. Instead, this effort leverages mechanical compliance and utilizes an object agnostic manipulation model of the hand learned offline, off-the-shelf motion planning, and an RGBD-based object tracker trained solely with synthetic data. These features allow the proposed system to easily generalize and transfer to new tasks and environments. This paper describes in detail the system components and showcases its efficacy with extensive experiments involving tight tolerance peg-in-hole insertion tasks of various geometries as well as open-world constrained placement tasks.