arXiv reaDer
ViLiVO: Virtual LiDAR-Visual Odometry for an Autonomous Vehicle with a Multi-Camera System
  この論文では、自律走行車用のマルチカメラ視覚走行距離計(VO)システムを紹介します。私たちのシステムは、主に仮想LiDARとポーズトラッカーで構成されています。透視変換法を使用して、歪みのない魚眼カメラ画像からサラウンドビュー画像を合成します。セマンティックセグメンテーションモデルを使用すると、空き領域を抽出できます。仮想LiDARのスキャンは、自由空間の輪郭を離散化することにより生成されます。ポーズトラッカーに関しては、特徴照合と仮想LiDARスキャン照合結果の両方を融合した視覚走行距離測定システムを提案します。自由空間領域にある特徴点のみが、姿勢推定のための2D-2Dマッチングを保証するために利用されます。さらに、特徴点の再投影エラーとスキャンマッチングエラーを最小限に抑えるために、バンドル調整(BA)が実行されます。 4台の魚眼カメラを搭載した自律走行車にシステムを適用します。テストシナリオには、屋外駐車場と屋内ガレージが含まれます。実験結果は、本システムが魚眼カメラベースの単眼視覚走行距離測定システムと比較して、より堅牢で正確なパフォーマンスを達成することを示しています。
In this paper, we present a multi-camera visual odometry (VO) system for an autonomous vehicle. Our system mainly consists of a virtual LiDAR and a pose tracker. We use a perspective transformation method to synthesize a surround-view image from undistorted fisheye camera images. With a semantic segmentation model, the free space can be extracted. The scans of the virtual LiDAR are generated by discretizing the contours of the free space. As for the pose tracker, we propose a visual odometry system fusing both the feature matching and the virtual LiDAR scan matching results. Only those feature points located in the free space area are utilized to ensure the 2D-2D matching for pose estimation. Furthermore, bundle adjustment (BA) is performed to minimize the feature points reprojection error and scan matching error. We apply our system to an autonomous vehicle equipped with four fisheye cameras. The testing scenarios include an outdoor parking lot as well as an indoor garage. Experimental results demonstrate that our system achieves a more robust and accurate performance comparing with a fisheye camera based monocular visual odometry system.
updated: Mon Sep 30 2019 04:50:33 GMT+0000 (UTC)
published: Mon Sep 30 2019 04:50:33 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト