arXiv reaDer
iGibson 1.0:大規模でリアルなシーンでのインタラクティブタスクのシミュレーション環境
iGibson 1.0: a Simulation Environment for Interactive Tasks in Large Realistic Scenes
大規模でリアルなシーンでのインタラクティブなタスクのためのロボットソリューションを開発するための新しいシミュレーション環境であるiGibson1.0を紹介します。私たちの環境には、15の完全にインタラクティブなホームサイズのシーンが含まれており、108の部屋には、硬くて関節のあるオブジェクトが配置されています。シーンは実世界の家のレプリカであり、オブジェクトの分布とレイアウトは実世界のものと一致しています。 iGibson 1.0は、インタラクティブなタスクの研究を容易にするためにいくつかの重要な機能を統合します:i)高品質の仮想センサー信号(RGB、深度、セグメンテーション、LiDAR、フローなど)の生成、ii)オブジェクトの材料を変更するためのドメインランダム化(視覚的および物理的の両方)および/またはそれらの形状、iii)ロボットのベースとアームの衝突のない軌道を生成するための統合されたサンプリングベースのモーションプランナー、およびiv)人間のデモンストレーションの効率的な収集を可能にする直感的な人間-iGibsonインターフェース。実験を通じて、シーンの完全な双方向性により、エージェントが下流の操作タスクのトレーニングを加速する有用な視覚的表現を学習できることを示します。また、iGibson 1.0の機能により、ナビゲーションエージェントの一般化が可能になり、人間とiGibsonのインターフェイスと統合されたモーションプランナーにより、人間が実証した(モバイル)操作動作の効率的な模倣学習が容易になることも示します。 iGibson 1.0はオープンソースであり、包括的な例とドキュメントを備えています。詳細については、プロジェクトのWebサイトをご覧ください:
We present iGibson 1.0, a novel simulation environment to develop robotic solutions for interactive tasks in large-scale realistic scenes. Our environment contains 15 fully interactive home-sized scenes with 108 rooms populated with rigid and articulated objects. The scenes are replicas of real-world homes, with distribution and the layout of objects aligned to those of the real world. iGibson 1.0 integrates several key features to facilitate the study of interactive tasks: i) generation of high-quality virtual sensor signals (RGB, depth, segmentation, LiDAR, flow and so on), ii) domain randomization to change the materials of the objects (both visual and physical) and/or their shapes, iii) integrated sampling-based motion planners to generate collision-free trajectories for robot bases and arms, and iv) intuitive human-iGibson interface that enables efficient collection of human demonstrations. Through experiments, we show that the full interactivity of the scenes enables agents to learn useful visual representations that accelerate the training of downstream manipulation tasks. We also show that iGibson 1.0 features enable the generalization of navigation agents, and that the human-iGibson interface and integrated motion planners facilitate efficient imitation learning of human demonstrated (mobile) manipulation behaviors. iGibson 1.0 is open-source, equipped with comprehensive examples and documentation. For more information, visit our project website:
updated: Mon Jul 19 2021 21:24:52 GMT+0000 (UTC)
published: Sat Dec 05 2020 02:14:17 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト