具現化されたナビゲーション エージェントの堅牢性を評価するための試みとして、RobustNav を提案します。RobustNav は、さまざまな視覚的 (RGB 入力に影響を与える) およびダイナミクスにさらされたときの、具現化されたナビゲーション エージェントのパフォーマンスを定量化するフレームワークであり、遷移ダイナミクスに影響を与えます。ビジュアル ナビゲーションにおける最近の取り組みは、通常、類似した外観とダイナミクス特性を持つ新しいターゲット環境に一般化することに焦点を当てています。 RobustNav を使用すると、視覚的またはダイナミクスの破損があると、一部の標準の組み込みナビゲーション エージェントが大幅にパフォーマンスを下回る (または失敗する) ことがわかりました。私たちは、腐敗した状態で活動しているときに、そのようなエージェントの行動に現れる種類の特異性を体系的に分析します。最後に、RobustNav の視覚的破損については、データ拡張や自己監視適応などの堅牢性を向上させる標準的な手法により、ゼロショット耐性とナビゲーション パフォーマンスの改善が提供されますが、その点でまだ長い道のりがあることを示しています。クリーンな「破損していない」設定と比較して失われたパフォーマンスを回復することは、この方向でのさらなる研究を保証します。私たちのコードは https://github.com/allenai/robustnav で入手できます。
As an attempt towards assessing the robustness of embodied navigation agents, we propose RobustNav, a framework to quantify the performance of embodied navigation agents when exposed to a wide variety of visual - affecting RGB inputs - and dynamics - affecting transition dynamics - corruptions. Most recent efforts in visual navigation have typically focused on generalizing to novel target environments with similar appearance and dynamics characteristics. With RobustNav, we find that some standard embodied navigation agents significantly underperform (or fail) in the presence of visual or dynamics corruptions. We systematically analyze the kind of idiosyncrasies that emerge in the behavior of such agents when operating under corruptions. Finally, for visual corruptions in RobustNav, we show that while standard techniques to improve robustness such as data-augmentation and self-supervised adaptation offer some zero-shot resistance and improvements in navigation performance, there is still a long way to go in terms of recovering lost performance relative to clean "non-corrupt" settings, warranting more research in this direction. Our code is available at https://github.com/allenai/robustnav