キーポイントの検出と説明は、特にロボット工学と自動運転のためのコンピュータビジョンシステムで一般的に使用されるビルディングブロックです。しかし、これまでの技術の大部分は、都市の運転や自動駐車で一般的に使用されている魚眼カメラをほとんど考慮せずに、標準的なカメラに焦点を合わせてきました。この論文では、魚眼画像の新しいトレーニングと評価のパイプラインを提案します。 SuperPointをベースラインとして使用します。これは、ホモグラフィ推定で最先端の結果を達成した、自己監視型のキーポイント検出器および記述子です。歪みのない魚眼画像のトレーニングを可能にする魚眼適応パイプラインを紹介します。 HPatchesベンチマークでパフォーマンスを評価し、検出の再現性と記述子の一致の正確性について魚眼ベースの評価方法を導入することにより、OxfordRobotCarデータセットでパフォーマンスを評価します。
Keypoint detection and description is a commonly used building block in computer vision systems particularly for robotics and autonomous driving. However, the majority of techniques to date have focused on standard cameras with little consideration given to fisheye cameras which are commonly used in urban driving and automated parking. In this paper, we propose a novel training and evaluation pipeline for fisheye images. We make use of SuperPoint as our baseline which is a self-supervised keypoint detector and descriptor that has achieved state-of-the-art results on homography estimation. We introduce a fisheye adaptation pipeline to enable training on undistorted fisheye images. We evaluate the performance on the HPatches benchmark, and, by introducing a fisheye based evaluation method for detection repeatability and descriptor matching correctness, on the Oxford RobotCar dataset.