この論文では、光検出および測距(LiDAR)およびカメラセンサー用の新しいオンライン自己校正アプローチを提案します。 RGB画像とデキャリブレーションされた深度画像の特徴マップを連結する以前のCNNベースの方法と比較して、特徴マッチングのためにPWC-Netに触発されたコストボリュームを活用します。予測された外部キャリブレーションパラメーターの滑らかなL1-損失に加えて、追加の点群損失が適用されます。 LiDARとカメラの間の外部パラメータを直接回帰する代わりに、初期キャリブレーションからグラウンドトゥルースまでのキャリブレーション解除された偏差を予測します。推論中、反復リファインメントと時間フィルタリングアプローチを使用すると、キャリブレーションエラーはさらに減少します。 KITTIデータセットの評価結果は、私たちのアプローチが、最大1.5mの誤校正の大きさで、並進で0.297cm、回転で0.017°の平均絶対校正誤差に関して、CNNベースの最先端の方法よりも優れていることを示しています。 20°。
In this paper, we propose a novel online self-calibration approach for Light Detection and Ranging (LiDAR) and camera sensors. Compared to the previous CNN-based methods that concatenate the feature maps of the RGB image and decalibrated depth image, we exploit the cost volume inspired by the PWC-Net for feature matching. Besides the smooth L1-Loss of the predicted extrinsic calibration parameters, an additional point cloud loss is applied. Instead of regress the extrinsic parameters between LiDAR and camera directly, we predict the decalibrated deviation from initial calibration to the ground truth. During inference, the calibration error decreases further with the usage of iterative refinement and the temporal filtering approach. The evaluation results on the KITTI dataset illustrate that our approach outperforms CNN-based state-of-the-art methods in terms of a mean absolute calibration error of 0.297cm in translation and 0.017° in rotation with miscalibration magnitudes of up to 1.5m and 20°.