arXiv reaDer
IGibson 2.0:日常の家庭のタスクのロボット学習のためのオブジェクト中心のシミュレーション
IGibson 2.0: Object-Centric Simulation for Robot Learning of Everyday Household Tasks
具現化されたAIの最近の研究は、シミュレーション環境を使用してロボット学習アプローチを開発およびトレーニングすることによって後押しされています。ただし、シミュレーションを使用すると、ロボットシミュレータがシミュレートできるもの、つまりモーションと物理的接触のみを必要とするタスクに注意が偏ります。オープンソースのシミュレーション環境であるiGibson2.0を紹介します。これは、3つの主要なイノベーションを通じて、より多様な家庭のタスクのシミュレーションをサポートします。まず、iGibson 2.0は、より広い範囲のタスクをカバーするために必要な、温度、湿り度レベル、清浄度レベル、トグル状態とスライス状態などのオブジェクト状態をサポートします。次に、iGibson 2.0は、シミュレーターの状態をCookedやSoakedなどの論理状態にマップする一連の述語論理関数を実装します。さらに、論理状態が与えられると、iGibson2.0はそれを満たす有効な物理状態をサンプリングできます。この機能は、ユーザーの最小限の労力で、潜在的に無限のタスクインスタンスを生成できます。サンプリングメカニズムにより、意味的に意味のある場所に小さなオブジェクトをシーンに密集させることができます。第三に、iGibson 2.0には、デモを収集するために人間をシーンに没頭させるための仮想現実(VR)インターフェイスが含まれています。その結果、これらの新しいタイプのタスクに関する人間からのデモンストレーションを収集し、それらを模倣学習に使用することができます。この新しいシミュレーターが具体化されたAIの新しい研究をサポートする可能性を実証することを期待して、新しいタスクのロボット学習を可能にするiGibson2.0の新機能を評価します。 iGibson 2.0とその新しいデータセットは、で公開されます。
Recent research in embodied AI has been boosted by the use of simulation environments to develop and train robot learning approaches. However, the use of simulation has skewed the attention to tasks that only require what robotics simulators can simulate: motion and physical contact. We present iGibson 2.0, an open-source simulation environment that supports the simulation of a more diverse set of household tasks through three key innovations. First, iGibson 2.0 supports object states, including temperature, wetness level, cleanliness level, and toggled and sliced states, necessary to cover a wider range of tasks. Second, iGibson 2.0 implements a set of predicate logic functions that map the simulator states to logic states like Cooked or Soaked. Additionally, given a logic state, iGibson 2.0 can sample valid physical states that satisfy it. This functionality can generate potentially infinite instances of tasks with minimal effort from the users. The sampling mechanism allows our scenes to be more densely populated with small objects in semantically meaningful locations. Third, iGibson 2.0 includes a virtual reality (VR) interface to immerse humans in its scenes to collect demonstrations. As a result, we can collect demonstrations from humans on these new types of tasks, and use them for imitation learning. We evaluate the new capabilities of iGibson 2.0 to enable robot learning of novel tasks, in the hope of demonstrating the potential of this new simulator to support new research in embodied AI. iGibson 2.0 and its new dataset will be publicly available at
updated: Fri Aug 06 2021 18:41:39 GMT+0000 (UTC)
published: Fri Aug 06 2021 18:41:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト