arXiv reaDer
ThreeDWorldトランスポートチャレンジ:物理的にリアルな具体化されたAIのための視覚的にガイドされたタスクアンドモーションプランニングベンチマーク
The ThreeDWorld Transport Challenge: A Visually Guided Task-and-Motion Planning Benchmark for Physically Realistic Embodied AI
ThreeDWorld Transport Challengeと呼ばれる、視覚的にガイドされ、物理学に基づいたタスクとモーションの計画ベンチマークを紹介します。このチャレンジでは、2つの9-DOF関節アームを備えた具体化されたエージェントが、シミュレートされた物理的な家庭環境でランダムに生成されます。エージェントは、家の周りに散らばっている小さなオブジェクトのセットを見つけ、それらを拾い上げて、目的の最終的な場所に輸送する必要があります。また、家の周りにコンテナを配置し、物を効率的に運ぶためのツールとして使用できます。タスクを完了するには、具体化されたエージェントは、現実的な物理的制約に直面して多数のオブジェクトの状態を変更する一連のアクションを計画する必要があります。このベンチマークチャレンジは、ThreeDWorldシミュレーションを使用して構築します。これは、すべてのオブジェクトが物理学に応答し、完全に物理学主導のナビゲーションおよびインタラクションAPIを使用して制御できる仮想3D環境です。このベンチマークでいくつかの既存のエージェントを評価します。実験結果は次のことを示唆しています。1)純粋なRLモデルはこの課題に苦労しています。 2)階層的な計画ベースのエージェントは、いくつかのオブジェクトを転送できますが、それでもこのタスクを解決するにはほど遠いです。このベンチマークにより、研究者は物理世界向けのよりインテリジェントな物理駆動型ロボットを開発できるようになると期待しています。
We introduce a visually-guided and physics-driven task-and-motion planning benchmark, which we call the ThreeDWorld Transport Challenge. In this challenge, an embodied agent equipped with two 9-DOF articulated arms is spawned randomly in a simulated physical home environment. The agent is required to find a small set of objects scattered around the house, pick them up, and transport them to a desired final location. We also position containers around the house that can be used as tools to assist with transporting objects efficiently. To complete the task, an embodied agent must plan a sequence of actions to change the state of a large number of objects in the face of realistic physical constraints. We build this benchmark challenge using the ThreeDWorld simulation: a virtual 3D environment where all objects respond to physics, and where can be controlled using fully physics-driven navigation and interaction API. We evaluate several existing agents on this benchmark. Experimental results suggest that: 1) a pure RL model struggles on this challenge; 2) hierarchical planning-based agents can transport some objects but still far from solving this task. We anticipate that this benchmark will empower researchers to develop more intelligent physics-driven robots for the physical world.
updated: Thu Mar 25 2021 17:59:08 GMT+0000 (UTC)
published: Thu Mar 25 2021 17:59:08 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト