arXiv reaDer
カメラ キャリブレーションとその先のディープ ラーニング: 調査
Deep Learning for Camera Calibration and Beyond: A Survey
カメラのキャリブレーションには、キャプチャされたシーケンスから幾何学的特徴を推測するためのカメラ パラメーターの推定が含まれます。これは、コンピューター ビジョンとロボット工学にとって重要です。しかし、従来のキャリブレーションは手間がかかり、専用のコレクションが必要です。最近の取り組みは、学習ベースのソリューションが手動キャリブレーションの再現性作業の代わりに使用される可能性があることを示しています。これらのソリューションの中で、さまざまな学習戦略、ネットワーク、幾何学的事前確率、およびデータセットが調査されています。このホワイト ペーパーでは、学習ベースのカメラ キャリブレーション手法の長所と短所を分析することにより、包括的な調査を提供します。当社の主なキャリブレーション カテゴリには、標準ピンホール カメラ モデル、歪みカメラ モデル、クロスビュー モデル、クロスセンサー モデルが含まれており、研究の傾向と拡張アプリケーションに従います。このコミュニティにはベンチマークがないため、既存の方法の一般化を評価するための公開プラットフォームとして機能する全体的なキャリブレーション データセットを収集します。合成データと現実世界のデータの両方で構成され、さまざまなシーンでさまざまなカメラでキャプチャされた画像とビデオが含まれています。このホワイト ペーパーの終わりに向かって、課題について説明し、さらなる研究の方向性を示します。私たちの知る限り、これは学習ベースのカメラ キャリブレーションの最初の調査です (8 年間)。要約された方法、データセット、およびベンチマークが利用可能であり、https://github.com/KangLiao929/Awesome-Deep-Camera-Calibration で定期的に更新されます。
Camera calibration involves estimating camera parameters to infer geometric features from captured sequences, which is crucial for computer vision and robotics. However, conventional calibration is laborious and requires dedicated collection. Recent efforts show that learning-based solutions have the potential to be used in place of the repeatability works of manual calibrations. Among these solutions, various learning strategies, networks, geometric priors, and datasets have been investigated. In this paper, we provide a comprehensive survey of learning-based camera calibration techniques, by analyzing their strengths and limitations. Our main calibration categories include the standard pinhole camera model, distortion camera model, cross-view model, and cross-sensor model, following the research trend and extended applications. As there is no benchmark in this community, we collect a holistic calibration dataset that can serve as a public platform to evaluate the generalization of existing methods. It comprises both synthetic and real-world data, with images and videos captured by different cameras in diverse scenes. Toward the end of this paper, we discuss the challenges and provide further research directions. To our knowledge, this is the first survey for the learning-based camera calibration (spanned 8 years). The summarized methods, datasets, and benchmarks are available and will be regularly updated at https://github.com/KangLiao929/Awesome-Deep-Camera-Calibration.
updated: Tue Jun 04 2024 08:57:38 GMT+0000 (UTC)
published: Sun Mar 19 2023 04:00:05 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト