arXiv reaDer
スペース:3D環境での物理的相互作用と因果学習のためのシミュレーター
SPACE: A Simulator for Physical Interactions and Causal Learning in 3D Environments
ディープラーニング、コンピュータービジョン、および具体化されたAIの最近の進歩により、合成因果推論ビデオデータセットが生まれました。これらのデータセットは、オブジェクト間の物理的相互作用について推論できるAIアルゴリズムの開発を容易にします。ただし、これまでのデータセットは、主にローリングや落下などの基本的な物理イベントに焦点を当ててきました。現在、人間が現実世界のオブジェクトに対して毎日実行する物理的相互作用に焦点を当てたデータセットは不足しています。この不足に対処するために、SPACE:3D環境での物理的相互作用と因果学習のためのシミュレーターを紹介します。 SPACEシミュレーターを使用すると、3D環境で合成ビデオデータセットであるSPACEデータセットを生成して、さまざまな物理的原因推論タスクで物理ベースのモデルを体系的に評価できます。毎日のオブジェクトの相互作用に触発されたSPACEデータセットは、封じ込め、安定性、接触という3種類の物理的イベントを描いたビデオで構成されています。これらのイベントは、オブジェクト間の基本的な物理的相互作用の大部分を占めています。次に、最先端の物理ベースのディープモデルを使用してそれをさらに評価し、SPACEデータセットがカリキュラム学習に触発されたアプローチで直感的な物理の学習を改善することを示します。リポジトリ:https://github.com/jiafei1224/SPACE
Recent advancements in deep learning, computer vision, and embodied AI have given rise to synthetic causal reasoning video datasets. These datasets facilitate the development of AI algorithms that can reason about physical interactions between objects. However, datasets thus far have primarily focused on elementary physical events such as rolling or falling. There is currently a scarcity of datasets that focus on the physical interactions that humans perform daily with objects in the real world. To address this scarcity, we introduce SPACE: A Simulator for Physical Interactions and Causal Learning in 3D Environments. The SPACE simulator allows us to generate the SPACE dataset, a synthetic video dataset in a 3D environment, to systematically evaluate physics-based models on a range of physical causal reasoning tasks. Inspired by daily object interactions, the SPACE dataset comprises videos depicting three types of physical events: containment, stability and contact. These events make up the vast majority of the basic physical interactions between objects. We then further evaluate it with a state-of-the-art physics-based deep model and show that the SPACE dataset improves the learning of intuitive physics with an approach inspired by curriculum learning. Repository: https://github.com/jiafei1224/SPACE
updated: Fri Aug 13 2021 11:49:46 GMT+0000 (UTC)
published: Fri Aug 13 2021 11:49:46 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト