トップダウンのビンピッキングシナリオを超えた6Dロボットによる把握は困難な作業です。ロボット動作計画を使用した6D把握合成に基づく以前のソリューションは、通常、知覚フィードバック、ダイナミクス、およびオブジェクトとの接触を考慮せずに開ループ設定で動作するため、把握合成エラーに敏感になります。この作業では、自己中心的なカメラからの点群を使用して6Dロボット把持の閉ループ制御ポリシーを学習するための新しい方法を提案します。模倣学習と強化学習を組み合わせて、見えない物体を把握し、連続した6Dアクション空間を処理します。この空間では、関節の動きと把握プランナーから専門家のデモンストレーションが行われます。目標予測を把握することを補助タスクとして使用して、ポリシー学習を容易にする、目標補助アクター批評アルゴリズムを紹介します。目標の把握に関する監督は、既知のオブジェクトのエキスパートプランナーから、または未知のオブジェクトの後知恵の目標から取得できます。全体として、学習した閉ループポリシーは、シミュレーションでさまざまなShapeNetオブジェクトとYCBオブジェクトを把握することで90%を超える成功率を達成します。ポリシーはまた、私たちの実験では、卓上設定と人間とロボットのハンドオーバー設定の両方で見えないオブジェクトを把握するために、現実の世界にうまく移行します。私たちのビデオはhttps://sites.google.com/view/gaddpgで見つけることができます。
6D robotic grasping beyond top-down bin-picking scenarios is a challenging task. Previous solutions based on 6D grasp synthesis with robot motion planning usually operate in an open-loop setting without considering perception feedback, dynamics, and contacts with objects, which makes them sensitive to grasp synthesis errors. In this work, we propose a novel method for learning closed-loop control policies for 6D robotic grasping using point clouds from an egocentric camera. We combine imitation learning and reinforcement learning in order to grasp unseen objects and handle the continuous 6D action space, where expert demonstrations are obtained from a joint motion and grasp planner. We introduce a goal-auxiliary actor-critic algorithm, which uses grasping goal prediction as an auxiliary task to facilitate policy learning. The supervision on grasping goals can be obtained from the expert planner for known objects or from hindsight goals for unknown objects. Overall, our learned closed-loop policy achieves over 90% success rates on grasping various ShapeNet objects and YCB objects in simulation. The policy also transfers well to the real world for grasping unseen objects in both a tabletop setting and a human-robot handover setting in our experiments. Our video can be found at https://sites.google.com/view/gaddpg .