ビジュアルナビゲーションのコンテキストでは、エージェントが検討対象の場所での観測履歴を活用し、既知の目標に効率的に到達するには、新しい環境をマッピングする機能が必要です。この機能は、エージェントが空間的な関係と規則性を認識し、オブジェクトの特性を発見できる空間的推論に関連付けることができます。従来の強化学習(RL)の設定では、この能力は報酬のみから学習されます。目標に到達する下流の目的のために訓練されたエージェントの空間知覚能力の出現を支持するように設計された補助タスクの形で補足的な監督を紹介します。特定の場所にいるエージェントと到達する目標との間の空間的関係を定量化するメトリックを推定することを学ぶことは、マルチオブジェクトナビゲーション設定に大きなプラスの影響を与えることを示します。私たちの方法は、環境の明示的または暗黙的な表現を構築するさまざまなベースラインエージェントのパフォーマンスを大幅に向上させ、グラウンドトゥルースマップを入力として使用する比類のないオラクルエージェントのパフォーマンスと一致させます。
In the context of visual navigation, the capacity to map a novel environment is necessary for an agent to exploit its observation history in the considered place and efficiently reach known goals. This ability can be associated with spatial reasoning, where an agent is able to perceive spatial relationships and regularities, and discover object characteristics. In classical Reinforcement Learning (RL) setups, this capacity is learned from reward alone. We introduce supplementary supervision in the form of auxiliary tasks designed to favor the emergence of spatial perception capabilities in agents trained for a goal-reaching downstream objective. We show that learning to estimate metrics quantifying the spatial relationships between an agent at a given location and a goal to reach has a high positive impact in Multi-Object Navigation settings. Our method significantly improves the performance of different baseline agents, that either build an explicit or implicit representation of the environment, even matching the performance of incomparable oracle agents taking ground-truth maps as input.