パノラマをキャプチャするとき、人々はカメラを垂直軸、つまり重力の方向に合わせる傾向があります。また、スマートフォンやタブレットなどの最新機器には、重力ベクトルを正確に測定できるIMU(慣性計測装置)が搭載されています。この事前設定を使用すると、カメラのy軸を位置合わせするか、すでに位置合わせされていると見なして、相対的な向きを1-DOF(自由度)に下げることができます。この仮定を利用して、光学中心が一致する、つまり純粋な回転を受けるカメラによって撮影された画像のパノラマ画像スティッチングに対する新しい最小ソリューションを提案します。放射状歪みの有無にかかわらず、未知の固定または変動焦点距離を想定して、4つの実用的なカメラ構成を検討します。ソルバーは、合成シーンと、Sun360データセットおよびIMUを搭載した2台のスマートフォンを使用してキャプチャしたシーンからの50万を超える実画像ペアの両方でテストされます。それらは、精度と処理時間の両方の点で最先端技術を上回っていることを示しています。
When capturing panoramas, people tend to align their cameras with the vertical axis, i.e., the direction of gravity. Moreover, modern devices, such as smartphones and tablets, are equipped with an IMU (Inertial Measurement Unit) that can measure the gravity vector accurately. Using this prior, the y-axes of the cameras can be aligned or assumed to be already aligned, reducing their relative orientation to 1-DOF (degree of freedom). Exploiting this assumption, we propose new minimal solutions to panoramic image stitching of images taken by cameras with coinciding optical centers, i.e., undergoing pure rotation. We consider four practical camera configurations, assuming unknown fixed or varying focal length with or without radial distortion. The solvers are tested both on synthetic scenes and on more than 500k real image pairs from the Sun360 dataset and from scenes captured by us using two smartphones equipped with IMUs. It is shown, that they outperform the state-of-the-art both in terms of accuracy and processing time.