イメージ ゴール ナビゲーションのような現実的な長期タスクには、探索的および搾取的なフェーズが含まれます。目標のイメージを割り当てられた具体化されたエージェントは、目標を発見するために探索する必要があります。つまり、学習した事前確率を使用して効率的に検索します。目標が発見されると、エージェントは目標までのナビゲーションのラスト マイルを正確に調整する必要があります。他の堅牢なシステムと同様に、探索的目標発見と搾取的ラスト マイル ナビゲーションを切り替えることで、エラーからの回復を改善できます。これらの直感的なガイド レールに従って、既存のイメージ ゴール ナビゲーション システムのパフォーマンスを向上させる SLING を提案します。以前の方法を完全に補完し、ラストマイル ナビゲーションに焦点を当て、ニューラル ディスクリプタを使用して問題の根底にある幾何学的構造を活用します。シンプルだが効果的なスイッチを使用すると、SLING をヒューリスティック、強化学習、およびニューラル モジュール ポリシーと簡単に接続できます。標準化された画像と目標のナビゲーション ベンチマーク (Hahn et al. 2021) では、ポリシー、シーン、およびエピソードの複雑さ全体でパフォーマンスが向上し、最先端の成功率が 45% から 55% に上昇しました。写真のようにリアルなシミュレーションを超えて、3 つの物理的なシーンで実際のロボット実験を行い、これらの改善が実際の環境にうまく適用されることを確認しました。
Realistic long-horizon tasks like image-goal navigation involve exploratory and exploitative phases. Assigned with an image of the goal, an embodied agent must explore to discover the goal, i.e., search efficiently using learned priors. Once the goal is discovered, the agent must accurately calibrate the last-mile of navigation to the goal. As with any robust system, switches between exploratory goal discovery and exploitative last-mile navigation enable better recovery from errors. Following these intuitive guide rails, we propose SLING to improve the performance of existing image-goal navigation systems. Entirely complementing prior methods, we focus on last-mile navigation and leverage the underlying geometric structure of the problem with neural descriptors. With simple but effective switches, we can easily connect SLING with heuristic, reinforcement learning, and neural modular policies. On a standardized image-goal navigation benchmark (Hahn et al. 2021), we improve performance across policies, scenes, and episode complexity, raising the state-of-the-art from 45% to 55% success rate. Beyond photorealistic simulation, we conduct real-robot experiments in three physical scenes and find these improvements to transfer well to real environments.