グローバルローカリゼーションは、多くのロボットアプリケーションで重要かつ広く研究されている問題です。場所の認識アプローチは、たとえば自動運転の分野でこのタスクを解決するために活用できます。ほとんどのビジョンベースのアプローチは、画像w.r.tと一致しますが、画像データベース、LiDARマップ内のグローバルな視覚的ローカリゼーションは、主にLiDARから生成された高解像度3Dマップへの道は明らかであるにもかかわらず、かなり未踏のままです。この作業では、Deep Neural Network(DNN)アプローチを活用して、画像とLiDARマップの間に共有埋め込みスペースを作成し、画像から3D-LiDARの場所認識を可能にします。同じ場所を参照するかどうかに関係なく、互いに近い画像と点群から埋め込みを作成する2Dと3D DNNをトレーニングしました。アプローチw.r.tの有効性を評価するために、広範な実験活動が提示されています。さまざまな学習パラダイム、ネットワークアーキテクチャ、および損失関数。すべての評価は、Oxford Robotcar Datasetを使用して実行されており、広範囲の天気と光の状態を網羅しています。
Global localization is an important and widely studied problem for many robotic applications. Place recognition approaches can be exploited to solve this task, e.g., in the autonomous driving field. While most vision-based approaches match an image w.r.t. an image database, global visual localization within LiDAR-maps remains fairly unexplored, even though the path toward high definition 3D maps, produced mainly from LiDARs, is clear. In this work we leverage Deep Neural Network (DNN) approaches to create a shared embedding space between images and LiDAR-maps, allowing for image to 3D-LiDAR place recognition. We trained a 2D and a 3D DNN that create embeddings, respectively from images and from point clouds, that are close to each other whether they refer to the same place. An extensive experimental activity is presented to assess the effectiveness of the approach w.r.t. different learning paradigms, network architectures, and loss functions. All the evaluations have been performed using the Oxford Robotcar Dataset, which encompasses a wide range of weather and light conditions.