野生の単眼深度推定は、本質的に未知のスケールまでの深度を予測します。スケールのあいまいさの問題を解決するために、固有受容センサーを備えた単眼同時ローカリゼーションおよびマッピング(SLAM)を活用する学習アルゴリズムを提示します。このような単眼SLAMシステムは、計量的にスケーリングされたカメラポーズを提供できます。これらのメトリックポーズと単眼シーケンスを考慮して、メトリックスケーリングされた深度推定を可能にするために、事前にトレーニングされた監視あり単眼深度ネットワークの自己監視学習方法を提案します。私たちのアプローチは、高品質の深さを予測するために私たちのネットワークを導く教師と生徒の定式化に基づいています。私たちのアプローチは、移動ロボットのナビゲーションなどのさまざまなアプリケーションに役立ち、さまざまな環境に適用できることを示しています。私たちの完全なシステムは、EuRoC、OpenLORIS、およびScanNetデータセットでの最近の自己監視深度推定および完了方法に対する改善を示しています。
Monocular depth estimation in the wild inherently predicts depth up to an unknown scale. To resolve scale ambiguity issue, we present a learning algorithm that leverages monocular simultaneous localization and mapping (SLAM) with proprioceptive sensors. Such monocular SLAM systems can provide metrically scaled camera poses. Given these metric poses and monocular sequences, we propose a self-supervised learning method for the pre-trained supervised monocular depth networks to enable metrically scaled depth estimation. Our approach is based on a teacher-student formulation which guides our network to predict high-quality depths. We demonstrate that our approach is useful for various applications such as mobile robot navigation and is applicable to diverse environments. Our full system shows improvements over recent self-supervised depth estimation and completion methods on EuRoC, OpenLORIS, and ScanNet datasets.