arXiv reaDer
RelMobNet:堅牢な2段階トレーニングを使用したエンドツーエンドの相対的なカメラポーズ推定
RelMobNet: End-to-end relative camera pose estimation using a robust two-stage training
相対的なカメラポーズ推定、つまり、異なる場所で撮影された1組の画像を使用して並進ベクトルと回転ベクトルを推定することは、拡張現実とロボット工学のシステムの重要な部分です。この論文では、カメラパラメータに依存しないシャムアーキテクチャを使用したエンドツーエンドの相対的なカメラポーズ推定ネットワークを紹介します。ネットワークは、ケンブリッジランドマークデータと4つの個別のシーンデータセット、および4つのシーンを組み合わせたデータセットを使用してトレーニングされます。一般化を改善するために、並進と回転の損失スケールのバランスをとるためのハイパーパラメータの必要性を軽減する新しい2段階のトレーニングを提案します。提案された方法は、RPNetやRCPNetなどの1段階トレーニングCNNベースの方法と比較され、提案されたモデルがKings College、Old Hospital、およびSt Marysで翻訳ベクトル推定を16.11%、28.88%、および52.27%改善することを示します。それぞれ教会のシーン。テクスチャの不変性を証明するために、生成的敵対的ネットワークを使用して、アブレーション研究として、データセットをさまざまなシーンスタイルに拡張する提案された方法の一般化を調査します。また、ネットワーク予測とグラウンドトゥルースポーズのエピポーラ線の定性的評価を提示します。
Relative camera pose estimation, i.e. estimating the translation and rotation vectors using a pair of images taken in different locations, is an important part of systems in augmented reality and robotics. In this paper, we present an end-to-end relative camera pose estimation network using a siamese architecture that is independent of camera parameters. The network is trained using the Cambridge Landmarks data with four individual scene datasets and a dataset combining the four scenes. To improve generalization, we propose a novel two-stage training that alleviates the need of a hyperparameter to balance the translation and rotation loss scale. The proposed method is compared with one-stage training CNN-based methods such as RPNet and RCPNet and demonstrate that the proposed model improves translation vector estimation by 16.11%, 28.88%, and 52.27% on the Kings College, Old Hospital, and St Marys Church scenes, respectively. For proving texture invariance, we investigate the generalization of the proposed method augmenting the datasets to different scene styles, as ablation studies, using generative adversarial networks. Also, we present a qualitative assessment of epipolar lines of our network predictions and ground truth poses.
updated: Sun Jul 10 2022 15:31:47 GMT+0000 (UTC)
published: Fri Feb 25 2022 17:27:26 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト