コンテキストは、インタラクティブ環境での動的エージェントのモーションの生成において重要な役割を果たします。この作品は、動きの予測のために環境の学習モデルを利用するモジュラー法を提案します。このモジュール性により、ラベルのない画像データのみに依存することで、軌道予測モデルを教師なしで目に見えない環境や新しいタスクに適応させることが明示的に可能になります。エージェントごとの動きとともに、特定の環境の空間的側面と動的側面の両方をモデル化します。これにより、より多くの情報に基づいたモーション予測が可能になり、最先端のパフォーマンスに匹敵するパフォーマンスが可能になります。ベンチマーク歩行者予測問題とロボット操作タスクを使用してモデルの予測機能を強調し、完全に教師なしの方法でこれらのタスク間で予測子を転送できることを示します。提案されたアプローチは、堅牢でラベル効率の高いフォワードモデリングを可能にし、新しい環境での完全なモデル再トレーニングの必要性を軽減します。
Context plays a significant role in the generation of motion for dynamic agents in interactive environments. This work proposes a modular method that utilises a learned model of the environment for motion prediction. This modularity explicitly allows for unsupervised adaptation of trajectory prediction models to unseen environments and new tasks by relying on unlabelled image data only. We model both the spatial and dynamic aspects of a given environment alongside the per agent motions. This results in more informed motion prediction and allows for performance comparable to the state-of-the-art. We highlight the model's prediction capability using a benchmark pedestrian prediction problem and a robot manipulation task and show that we can transfer the predictor across these tasks in a completely unsupervised way. The proposed approach allows for robust and label efficient forward modelling, and relaxes the need for full model re-training in new environments.