arXiv reaDer
OmniHang:接触点の対応と神経衝突の推定を使用して任意のオブジェクトを吊るす方法を学ぶ
OmniHang: Learning to Hang Arbitrary Objects using Contact Point Correspondences and Neural Collision Estimation
この論文では、ロボットがラックやフックなどのさまざまなサポートアイテムのセットに任意のオブジェクトをぶら下げることを学習できるかどうかを探ります。このような能力を備えたロボットは、国内サービス、ロジスティクス、製造などの多くの分野で応用されています。それでも、日常のオブジェクトのジオメトリとトポロジは非常に多様であるため、これは困難な操作タスクです。本論文では、物体と支持物の部分点群を入力とし、物体をどこにどのように安定的に吊るすかを学習するシステムを提案する。私たちのシステムは、オブジェクトとサポートアイテムの間の接触点の対応を推定することを学習して、推定された安定したポーズを取得します。次に、深層強化学習アルゴリズムを実行して、予測された安定したポーズを調整します。次に、ロボットは、オブジェクトを初期ポーズから安定した吊り下げポーズに移動するために、衝突のないパスを見つける必要があります。この目的のために、オブジェクトとサポートアイテムの部分的な点群を入力として受け取るニューラルネットワークベースの衝突推定器をトレーニングします。さまざまなサポートアイテムにぶら下がっているオブジェクトの安定したポーズとそれらの接点の対応で注釈が付けられた、新しくてやりがいのある大規模な合成データセットを生成します。このデータセットでは、システムが安定したオブジェクトのポーズを予測する成功率68.3%を達成でき、実行可能なパスを見つけるという点で52.1%のF1スコアを持っていることを示しています。補足資料とビデオは、プロジェクトのWebページで入手できます。
In this paper, we explore whether a robot can learn to hang arbitrary objects onto a diverse set of supporting items such as racks or hooks. Endowing robots with such an ability has applications in many domains such as domestic services, logistics, or manufacturing. Yet, it is a challenging manipulation task due to the large diversity of geometry and topology of everyday objects. In this paper, we propose a system that takes partial point clouds of an object and a supporting item as input and learns to decide where and how to hang the object stably. Our system learns to estimate the contact point correspondences between the object and supporting item to get an estimated stable pose. We then run a deep reinforcement learning algorithm to refine the predicted stable pose. Then, the robot needs to find a collision-free path to move the object from its initial pose to stable hanging pose. To this end, we train a neural network based collision estimator that takes as input partial point clouds of the object and supporting item. We generate a new and challenging, large-scale, synthetic dataset annotated with stable poses of objects hung on various supporting items and their contact point correspondences. In this dataset, we show that our system is able to achieve a 68.3% success rate of predicting stable object poses and has a 52.1% F1 score in terms of finding feasible paths. Supplemental material and videos are available on our project webpage.
updated: Fri Mar 26 2021 06:11:05 GMT+0000 (UTC)
published: Fri Mar 26 2021 06:11:05 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト