人間は他人を観察することによって模倣することを学びます。ただし、ロボットの模倣学習には、通常、一人称視点(FPV)での専門家によるデモンストレーションが必要です。すべてのロボットについてこのようなFPVビデオを収集すると、非常にコストがかかる可能性があります。サードパーソン模倣学習(TPIL)は、人間が行うのと同様に、サードパーソンビュー(TPV)で他のエージェントを観察することによってアクションポリシーを学習するという概念です。これにより、最終的には、ポリシー学習のために、さまざまなデータソースからのTPVで人間とロボットのデモビデオを利用できるようになります。この論文では、自我運動を伴うロボットタスクのためのTPILアプローチを提示します。地上/空中移動を伴う多くのロボットタスクは、カメラの自我運動を伴うアクションを伴うことがよくありますが、そのようなタスクのTPILに関する研究は限られています。ここで、FPVとTPVの観測は視覚的に非常に異なります。 FPVはエゴモーションを示しますが、エージェントの外観はTPVでのみ観察できます。 TPILのより良い状態学習を可能にするために、我々は解きほぐされた表現学習法を提案します。デュアルオートエンコーダ構造に加えて、表現の順列損失と時間対照損失を使用して、状態と視点の表現が十分に解きほぐされていることを確認します。私たちの実験は、私たちのアプローチの有効性を示しています。
Humans learn to imitate by observing others. However, robot imitation learning generally requires expert demonstrations in the first-person view (FPV). Collecting such FPV videos for every robot could be very expensive. Third-person imitation learning (TPIL) is the concept of learning action policies by observing other agents in a third-person view (TPV), similar to what humans do. This ultimately allows utilizing human and robot demonstration videos in TPV from many different data sources, for the policy learning. In this paper, we present a TPIL approach for robot tasks with egomotion. Although many robot tasks with ground/aerial mobility often involve actions with camera egomotion, study on TPIL for such tasks has been limited. Here, FPV and TPV observations are visually very different; FPV shows egomotion while the agent appearance is only observable in TPV. To enable better state learning for TPIL, we propose our disentangled representation learning method. We use a dual auto-encoder structure plus representation permutation loss and time-contrastive loss to ensure the state and viewpoint representations are well disentangled. Our experiments show the effectiveness of our approach.