arXiv reaDer
CodeVIO:学習された最適化可能な高密度深度を備えた視覚慣性オドメトリ
CodeVIO: Visual-Inertial Odometry with Learned Optimizable Dense Depth
この作業では、軽量で密結合の深深度ネットワークと視覚慣性オドメトリ(VIO)システムを紹介します。これにより、周囲の正確な状態推定と高密度深度マップを提供できます。深さの推論とエンコードに提案された軽量の条件付き変分オートエンコーダー(CVAE)を活用して、VIOから以前に周辺化されたスパース機能をネットワークに提供し、初期の深さ予測と一般化機能の精度を高めます。次に、コンパクトにエンコードされた深度マップは、密なローカルシーンジオメトリを提供するために、スライディングウィンドウ推定器のナビゲーション状態と一緒に更新されます。さらに、以前の作業よりも1桁以上高速であることが示されているCVAEのヤコビアンを取得するための新しい方法を提案し、さらに再計算を回避するためにFirst-Estimate Jacobian(FEJ)を活用します。完全に密な残差に依存する以前の作業とは対照的に、深度コードを更新するためにスパース測定のみを提供し、スパース測定とFEJの選択が推定深度マップを大幅に改善できることを注意深い実験を通じて示すことを提案します。当社のフルシステムは、最先端のポーズ推定精度も示しており、ネットワークとコードヤコビアンにのみGPUアクセラレーションを利用しながら、シングルスレッド実行でリアルタイムに実行できることを示しています。
In this work, we present a lightweight, tightly-coupled deep depth network and visual-inertial odometry (VIO) system, which can provide accurate state estimates and dense depth maps of the immediate surroundings. Leveraging the proposed lightweight Conditional Variational Autoencoder (CVAE) for depth inference and encoding, we provide the network with previously marginalized sparse features from VIO to increase the accuracy of initial depth prediction and generalization capability. The compact encoded depth maps are then updated jointly with navigation states in a sliding window estimator in order to provide the dense local scene geometry. We additionally propose a novel method to obtain the CVAE's Jacobian which is shown to be more than an order of magnitude faster than previous works, and we additionally leverage First-Estimate Jacobian (FEJ) to avoid recalculation. As opposed to previous works relying on completely dense residuals, we propose to only provide sparse measurements to update the depth code and show through careful experimentation that our choice of sparse measurements and FEJs can still significantly improve the estimated depth maps. Our full system also exhibits state-of-the-art pose estimation accuracy, and we show that it can run in real-time with single-thread execution while utilizing GPU acceleration only for the network and code Jacobian.
updated: Fri Dec 18 2020 09:42:54 GMT+0000 (UTC)
published: Fri Dec 18 2020 09:42:54 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト