arXiv reaDer
両眼視覚強化学習による経済的で正確な操作と自動目と手の協調
Economical Precise Manipulation and Auto Eye-Hand Coordination with Binocular Visual Reinforcement Learning
多くのシナリオでは、精密なロボット操作タスク(挿入、ねじ込み、正確なピック、正確な配置)が必要です。以前の方法は、そのような操作タスクで良好なパフォーマンスを達成しました。ただし、このような方法では通常、面倒なキャリブレーションまたは高価なセンサーが必要です。 3D / RGB-Dカメラとトルク/力センサーはロボットアプリケーションのコストを増加させ、常に経済的であるとは限りません。この作業では、これらを解決することを目指していますが、キャリブレーションが不十分で低コストのWebカメラのみを使用しています。両眼アライメント学習(BAL)を提案します。これは、4つのタスクを解決するために、目と手の協調とポイントアライメント機能を自動的に学習できます。私たちの仕事は、未知の目と手の協調を扱うことに焦点を当てており、目と手のカメラのキャリブレーションを自動的に実行するさまざまな方法を提案しています。アルゴリズムはシミュレーションでトレーニングされ、実用的なパイプラインを使用してsim2realを実現し、実際のロボットでテストしました。私たちの方法は、4つのタスクのコストを最小限に抑えて競争力のある良い結果を達成します。
Precision robotic manipulation tasks (insertion, screwing, precisely pick, precisely place) are required in many scenarios. Previous methods achieved good performance on such manipulation tasks. However, such methods typically require tedious calibration or expensive sensors. 3D/RGB-D cameras and torque/force sensors add to the cost of the robotic application and may not always be economical. In this work, we aim to solve these but using only weak-calibrated and low-cost webcams. We propose Binocular Alignment Learning (BAL), which could automatically learn the eye-hand coordination and points alignment capabilities to solve the four tasks. Our work focuses on working with unknown eye-hand coordination and proposes different ways of performing eye-in-hand camera calibration automatically. The algorithm was trained in simulation and used a practical pipeline to achieve sim2real and test it on the real robot. Our method achieves a competitively good result with minimal cost on the four tasks.
updated: Thu May 12 2022 09:01:29 GMT+0000 (UTC)
published: Thu May 12 2022 09:01:29 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト