arXiv reaDer
TossingBot: Learning to Throw Arbitrary Objects with Residual Physics
 ロボットアームが選択したボックスに任意のオブジェクトをすばやく正確にピックアンドスローする方法を学習できるかどうかを調査します。投げは、ロボットアームの物理的な到達可能性とピッキング速度を向上させる可能性があります。ただし、構造化されていない設定で任意のオブジェクトを正確に投げるには、多くの課題があります。信頼できる事前スロー条件(たとえば、マニピュレータ内のオブジェクトの初期ポーズ)の取得から、さまざまなオブジェクト中心のプロパティ(たとえば、質量分布、摩擦、形状)やダイナミクス(たとえば、空気力学)の処理までです。 )。この作業では、視覚的観察(ビン内の任意のオブジェクトの画像)から試行錯誤を通じてモーションプリミティブを把握およびスローするための制御パラメーターを推論するために共同で学習するエンドツーエンドの定式化を提案します。この定式化の中で、把握と投げ(つまり、より正確な投げを可能にする学習の把握)と、シミュレーションとディープラーニング(つまり、物理シミュレーターによって予測される制御パラメーターの上に残差を予測するためにディープネットワークを使用すること)との間の相乗効果を調査します。結果のシステムであるTossingBotは、任意のオブジェクトを把握して、最大到達距離の範囲外にあるボックスに500+平均ピック(1時間あたり600+把握、85%の投球精度)で投げることができます。新しいオブジェクトとターゲットの場所に一般化します。ビデオはhttps://tossingbot.cs.princeton.eduで入手できます
We investigate whether a robot arm can learn to pick and throw arbitrary objects into selected boxes quickly and accurately. Throwing has the potential to increase the physical reachability and picking speed of a robot arm. However, precisely throwing arbitrary objects in unstructured settings presents many challenges: from acquiring reliable pre-throw conditions (e.g. initial pose of object in manipulator) to handling varying object-centric properties (e.g. mass distribution, friction, shape) and dynamics (e.g. aerodynamics). In this work, we propose an end-to-end formulation that jointly learns to infer control parameters for grasping and throwing motion primitives from visual observations (images of arbitrary objects in a bin) through trial and error. Within this formulation, we investigate the synergies between grasping and throwing (i.e., learning grasps that enable more accurate throws) and between simulation and deep learning (i.e., using deep networks to predict residuals on top of control parameters predicted by a physics simulator). The resulting system, TossingBot, is able to grasp and throw arbitrary objects into boxes located outside its maximum reach range at 500+ mean picks per hour (600+ grasps per hour with 85% throwing accuracy); and generalizes to new objects and target locations. Videos are available at
updated: Sat May 30 2020 15:59:12 GMT+0000 (UTC)
published: Wed Mar 27 2019 04:04:28 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト