自動車やUAVなどで使用されるスマートフォン、タブレット、カメラシステムには、通常、重力ベクトルを正確に測定できるIMU(慣性測定ユニット)が装備されています。この追加情報を使用して、カメラのy軸を位置合わせし、相対的な向きを単一の自由度に減らすことができます。この仮定の下で、過剰決定の場合の相対的な姿勢を推定するために、最小二乗の意味で代数誤差を最小化する、新しいグローバルに最適なソルバーを提案します。エピポーラ制約に基づいて、最適化問題を2つの未知数のみを持つ2つの多項式を解くことに変換します。また、回転の一次近似を使用した高速ソルバーが提案されています。提案されたソルバーは、約4つの実世界のデータセットで最先端のソルバーと比較されます。合計50000の画像ペア。さらに、スマートフォンによって、10933の画像ペア、重力方向、グラウンドトゥルース3D再構成からなるデータセットを収集しました。
Smartphones, tablets and camera systems used, e.g., in cars and UAVs, are typically equipped with IMUs (inertial measurement units) that can measure the gravity vector accurately. Using this additional information, the y-axes of the cameras can be aligned, reducing their relative orientation to a single degree-of-freedom. With this assumption, we propose a novel globally optimal solver, minimizing the algebraic error in the least-squares sense, to estimate the relative pose in the over-determined case. Based on the epipolar constraint, we convert the optimization problem into solving two polynomials with only two unknowns. Also, a fast solver is proposed using the first-order approximation of the rotation. The proposed solvers are compared with the state-of-the-art ones on four real-world datasets with approx. 50000 image pairs in total. Moreover, we collected a dataset, by a smartphone, consisting of 10933 image pairs, gravity directions, and ground truth 3D reconstructions.