arXiv reaDer
I2P-Rec: 鳥瞰図投影による大規模点群マップ上の画像認識
I2P-Rec: Recognizing Images on Large-scale Point Cloud Maps through Bird's Eye View Projections
場所認識は、オンライン位置特定アルゴリズムに最初の推測を提供できるため、自動運転車が完全な自律性を実現するための重要な技術です。画像または点群に基づく現在の方法は満足のいくパフォーマンスを達成していますが、大規模な点群マップ上で画像の位置を特定することは、依然としてかなり未解明な問題です。画像や点群から一貫した記述子を抽出するのが難しいため、このクロスモーダル マッチング タスクは困難です。本稿では、クロスモーダルデータを同一モダリティに変換することで問題を解決するI2P-Rec手法を提案する。具体的には、深度推定ネットワークの最近の成功を活用して、画像から点群を復元します。次に、点群を鳥瞰図 (BEV) 画像に投影します。 BEV 画像を中間表現として使用し、畳み込みニューラル ネットワークでグローバル特徴を抽出し、続いて NetVLAD 層でマッチングを実行します。 KITTI データセットで評価された実験結果は、点群マップ上の単眼画像とステレオ画像の位置を特定する際に、少数のトレーニング データセットのみを使用して、I2P-Rec がそれぞれ 80% と 90% 以上の上位 1% の再現率を達成することを示しています。 。さらに、自律型物流車によって収集された 1 km の軌道データセットで I2P-Rec を評価し、I2P-Rec がこれまで見たことのない環境にも十分に一般化できることを示します。
Place recognition is an important technique for autonomous cars to achieve full autonomy since it can provide an initial guess to online localization algorithms. Although current methods based on images or point clouds have achieved satisfactory performance, localizing the images on a large-scale point cloud map remains a fairly unexplored problem. This cross-modal matching task is challenging due to the difficulty in extracting consistent descriptors from images and point clouds. In this paper, we propose the I2P-Rec method to solve the problem by transforming the cross-modal data into the same modality. Specifically, we leverage on the recent success of depth estimation networks to recover point clouds from images. We then project the point clouds into Bird's Eye View (BEV) images. Using the BEV image as an intermediate representation, we extract global features with a Convolutional Neural Network followed by a NetVLAD layer to perform matching. The experimental results evaluated on the KITTI dataset show that, with only a small set of training data, I2P-Rec achieves recall rates at Top-1% over 80% and 90%, when localizing monocular and stereo images on point cloud maps, respectively. We further evaluate I2P-Rec on a 1 km trajectory dataset collected by an autonomous logistics car and show that I2P-Rec can generalize well to previously unseen environments.
updated: Tue Aug 15 2023 03:53:36 GMT+0000 (UTC)
published: Thu Mar 02 2023 07:56:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト