arXiv reaDer
自動運転車向けのエンド ツー エンドの Lidar カメラのセルフ キャリブレーション
End-to-End Lidar-Camera Self-Calibration for Autonomous Vehicles
自動運転車には、車が安全に運転できるように、マルチモーダル センサー セットアップが装備されています。このような知覚センサーの初期キャリブレーションは、高度に成熟したトピックであり、自動化された工場環境で日常的に行われています。ただし、車両の稼働期間全体にわたってキャリブレーションの品質を維持する方法について、興味深い問題が生じます。もう 1 つの課題は、システム エラーが伝播しないように複数のセンサーを共同で校正することです。この論文では、ピンホールカメラとライダーの自動キャリブレーション問題に対処するエンドツーエンドのディープセルフキャリブレーションネットワークである CaLiCa を提案します。カメラ画像と Lidar 点群の間の特徴相関を回帰することにより、カメラの固有パラメーター (焦点距離と歪み) と Lidar-Camera の外部パラメーター (回転と平行移動) を共同で予測します。ネットワークはシャム ツイン構造に配置され、ポイント クラウドとカメラの両方でネットワーク機能の学習を相互に共有される機能に制約します (Lidar-camera 制約)。 KITTI データセットを使用した評価では、シングルパス推論で 0.028 ピクセルの再投影誤差で 0.154 ° および 0.059 m の精度を達成することが示されています。また、エンドツーエンドの学習アーキテクチャが、分離されたキャリブレーションと比較して端末損失をどのように低減するか (回転損失が 21% 減少) の除去的研究も提供します。
Autonomous vehicles are equipped with a multi-modal sensor setup to enable the car to drive safely. The initial calibration of such perception sensors is a highly matured topic and is routinely done in an automated factory environment. However, an intriguing question arises on how to maintain the calibration quality throughout the vehicle's operating duration. Another challenge is to calibrate multiple sensors jointly to ensure no propagation of systemic errors. In this paper, we propose CaLiCa, an end-to-end deep self-calibration network which addresses the automatic calibration problem for pinhole camera and Lidar. We jointly predict the camera intrinsic parameters (focal length and distortion) as well as Lidar-Camera extrinsic parameters (rotation and translation), by regressing feature correlation between the camera image and the Lidar point cloud. The network is arranged in a Siamese-twin structure to constrain the network features learning to a mutually shared feature in both point cloud and camera (Lidar-camera constraint). Evaluation using KITTI datasets shows that we achieve 0.154 ° and 0.059 m accuracy with a reprojection error of 0.028 pixel with a single-pass inference. We also provide an ablative study of how our end-to-end learning architecture offers lower terminal loss (21% decrease in rotation loss) compared to isolated calibration
updated: Mon Apr 24 2023 19:44:23 GMT+0000 (UTC)
published: Mon Apr 24 2023 19:44:23 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト