arXiv reaDer
Form2Fit: Learning Shape Priors for Generalizable Assembly from Disassembly
 新しいオブジェクトに一般化できるロボットアセンブリのポリシーを学ぶことは可能ですか?このアイデアを、キットの組み立て作業のコンテキストで探ります。従来の方法はオブジェクトの姿勢推定に大きく依存しているため、3D CADモデルやタスク固有のトレーニングデータがないと、新しいオブジェクトに一般化するのに苦労することがよくあります。この作業では、視覚的な入力からオブジェクトサーフェスとターゲットの配置場所の幾何学的対応を確立する形状記述子を学習することを目的とする形状マッチング問題として、キットアセンブリタスクを定式化することを提案します。この定式化により、モデルは、形状と表面がどのように組み立てられて組み立てられるかをより広く理解できるようになり、新しいオブジェクトとキットに一般化することができます。モデルのトレーニングデータを取得するために、完全なキットを分解してグラウンドトゥルースのオブジェクトと配置の対応関係を取得する自己監視データ収集パイプラインを提示します。結果として得られる実際のシステムであるForm2Fitは、オブジェクトをさまざまなキットに組み立てるための効果的なピックアンドプレース戦略を学習します-異なる初期条件(たとえば、さまざまなオブジェクトとキットのポーズ)で平均成功率90%、新しい構成で94%成功複数のキットがあり、完全に新しいオブジェクトとキットで86%以上の成功を収めています。
Is it possible to learn policies for robotic assembly that can generalize to new objects? We explore this idea in the context of the kit assembly task. Since classic methods rely heavily on object pose estimation, they often struggle to generalize to new objects without 3D CAD models or task-specific training data. In this work, we propose to formulate the kit assembly task as a shape matching problem, where the goal is to learn a shape descriptor that establishes geometric correspondences between object surfaces and their target placement locations from visual input. This formulation enables the model to acquire a broader understanding of how shapes and surfaces fit together for assembly -- allowing it to generalize to new objects and kits. To obtain training data for our model, we present a self-supervised data-collection pipeline that obtains ground truth object-to-placement correspondences by disassembling complete kits. Our resulting real-world system, Form2Fit, learns effective pick and place strategies for assembling objects into a variety of kits -- achieving 90% average success rates under different initial conditions (e.g. varying object and kit poses), 94% success under new configurations of multiple kits, and over 86% success with completely new objects and kits.
updated: Sat May 16 2020 23:20:28 GMT+0000 (UTC)
published: Wed Oct 30 2019 05:11:53 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト