arXiv reaDer
CamLessMonoDepth:未知のカメラパラメータを使用した単眼深度推定
CamLessMonoDepth: Monocular Depth Estimation with Unknown Camera Parameters
3D情報を認識することは、コンピュータビジョンの多くのアプリケーションで最も重要です。単眼深度推定の最近の進歩は、グラウンドトゥルースデータを必要とせずに、深いニューラルネットワークをトレーニングして逆深度とポーズを予測することにより、単一のカメラ入力からそのような知識を得ることが可能であることを示しています。ただし、このようなアプローチの大部分では、トレーニング中にカメラパラメータを明示的に入力する必要があります。その結果、野生の画像シーケンスをトレーニング中に使用することはできません。カメラの本質を予測する方法もありますが、そのパフォーマンスは、カメラのパラメーターを入力として使用する新しい方法と同等ではありません。この作業では、単眼画像シーケンスのみから学習することにより、深さとポーズとともにピンホールカメラの固有値を暗黙的に推定する方法を提案します。さらに、効率的なサブピクセル畳み込みを利用することにより、忠実度の高い深度推定値が得られることを示します。また、ピクセル単位の不確実性推定をフレームワークに組み込んで、この作業が実際の領域で適用できる可能性を強調します。最後に、KITTIベンチマークの既存の最先端のアプローチを上回りながら、カメラの本質に関する事前の知識がなくても深度情報を正確に予測できる可能性を示します。
Perceiving 3D information is of paramount importance in many applications of computer vision. Recent advances in monocular depth estimation have shown that gaining such knowledge from a single camera input is possible by training deep neural networks to predict inverse depth and pose, without the necessity of ground truth data. The majority of such approaches, however, require camera parameters to be fed explicitly during training. As a result, image sequences from wild cannot be used during training. While there exist methods which also predict camera intrinsics, their performance is not on par with novel methods taking camera parameters as input. In this work, we propose a method for implicit estimation of pinhole camera intrinsics along with depth and pose, by learning from monocular image sequences alone. In addition, by utilizing efficient sub-pixel convolutions, we show that high fidelity depth estimates can be obtained. We also embed pixel-wise uncertainty estimation into the framework, to emphasize the possible applicability of this work in practical domain. Finally, we demonstrate the possibility of accurate prediction of depth information without prior knowledge of camera intrinsics, while outperforming the existing state-of-the-art approaches on KITTI benchmark.
updated: Wed Oct 27 2021 10:54:15 GMT+0000 (UTC)
published: Wed Oct 27 2021 10:54:15 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト