高解像度 (HD) セマンティック マップは、自動運転車が都市環境を移動できるようにするために重要です。オフライン HD マップを作成する従来の方法には、労働集約的な手動のアノテーション プロセスが含まれており、コストがかかるだけでなく、タイムリーな更新が不十分です。最近の研究では、オンラインセンサー観測を使用してローカルマップを生成する代替アプローチが提案されています。ただし、このアプローチは、センサーの知覚範囲とオクルージョンの影響を受けやすいことによって制限されます。この研究では、世界地図のニューラル表現である Neural Map Prior (NMP) を提案します。この表現は自動的に更新され、ローカル マップ推論のパフォーマンスが向上します。具体的には、これを達成するために 2 つのアプローチを利用します。まず、強力なマップ事前をローカル マップ推論に統合するために、現在の特徴と以前の特徴の間の相関関係を動的に識別するメカニズムであるクロスアテンションを適用します。次に、グローバル ニューラル マップを事前に更新するために、以前の走査からの特徴を融合する際にネットワークをガイドする学習ベースの融合モジュールを利用します。 nuScenes データセットに基づく実験結果は、私たちのフレームワークがさまざまなマップ セグメンテーションおよび検出アーキテクチャと高い互換性があることを示しています。困難な気象条件や知覚範囲が長い状況でも、地図予測のパフォーマンスが大幅に向上します。私たちの知る限り、これは世界地図を事前に作成するための最初の学習ベースのシステムです。
High-definition (HD) semantic maps are crucial in enabling autonomous vehicles to navigate urban environments. The traditional method of creating offline HD maps involves labor-intensive manual annotation processes, which are not only costly but also insufficient for timely updates. Recent studies have proposed an alternative approach that generates local maps using online sensor observations. However, this approach is limited by the sensor's perception range and its susceptibility to occlusions. In this study, we propose Neural Map Prior (NMP), a neural representation of global maps. This representation automatically updates itself and improves the performance of local map inference. Specifically, we utilize two approaches to achieve this. Firstly, to integrate a strong map prior into local map inference, we apply cross-attention, a mechanism that dynamically identifies correlations between current and prior features. Secondly, to update the global neural map prior, we utilize a learning-based fusion module that guides the network in fusing features from previous traversals. Our experimental results, based on the nuScenes dataset, demonstrate that our framework is highly compatible with various map segmentation and detection architectures. It significantly improves map prediction performance, even in challenging weather conditions and situations with a longer perception range. To the best of our knowledge, this is the first learning-based system for creating a global map prior.