この論文では、マップベースの再ローカリゼーションをオンラインの直接視覚オドメトリに統合するためのフレームワークを提案します。直接法のマップベースの再ローカリゼーションを実現するために、画像の特徴を直接スパースオドメトリ(DSO)に統合し、特徴のマッチングに依存して、オンライン視覚オドメトリ(VO)を以前に作成したマップに関連付けます。再ローカリゼーションポーズの統合は3つあります。まず、フロントエンドトラッキングの直接画像位置合わせにポーズの事前分布として組み込まれます。第二に、それらはバックエンドバンドル調整に緊密に統合されています。第三に、オンライン融合モジュールは、相対的なVOポーズとグローバルな再ローカリゼーションポーズをポーズグラフで組み合わせて、キーフレームごとに滑らかでグローバルに正確なポーズを推定するためにさらに提案されます。 2つのマルチウェザーデータセットでメソッドを評価し、さまざまな手作りおよび学習済みの機能を統合することの利点を示し、カメラの追跡精度の有望な改善を示します。
In this paper we propose a framework for integrating map-based relocalization into online direct visual odometry. To achieve map-based relocalization for direct methods, we integrate image features into Direct Sparse Odometry (DSO) and rely on feature matching to associate online visual odometry (VO) with a previously built map. The integration of the relocalization poses is threefold. Firstly, they are incorporated as pose priors in the direct image alignment of the front-end tracking. Secondly, they are tightly integrated into the back-end bundle adjustment. Thirdly, an online fusion module is further proposed to combine relative VO poses and global relocalization poses in a pose graph to estimate keyframe-wise smooth and globally accurate poses. We evaluate our method on two multi-weather datasets showing the benefits of integrating different handcrafted and learned features and demonstrating promising improvements on camera tracking accuracy.