arXiv reaDer
HMS-Net: Hierarchical Multi-scale Sparsity-invariant Network for Sparse Depth Completion
 密な奥行きの手がかりは重要であり、さまざまなコンピュータービジョンタスクに広く適用されます。自動運転では、LIDARセンサーを採用して車両周辺の深度測定値を取得し、周囲の環境を認識します。ただし、LIDARによって取得された深度マップは、一般にハードウェアの制限のためにまばらです。深度完了のタスクは、入力スパース深度マップから高密度深度マップを生成することを目的として、ますます注目を集めています。マルチスケール機能を効果的に利用するために、スパース入力とスパース機能マップを処理するためのスパース性不変マルチスケールエンコーダーデコーダーネットワーク(HMS-Net)も提案されています。追加のRGB機能を組み込んで、深度補完のパフォーマンスをさらに向上させることができます。 2つの公開ベンチマークであるKITTI深度補完ベンチマークとNYU-depth-v2データセットに関する広範な実験とコンポーネント分析は、提案されたアプローチの有効性を示しています。 2018年8月12日、KITTI深度補完リーダーボードで、RGBガイダンスを使用しない提案モデルは、RGB情報を使用しないピアレビュー済みのすべての方法の中で最初にランク付けされ、RGBガイダンスを使用するモデルは、すべてのRGBガイド付き方法の中で2番目にランクされます
Dense depth cues are important and have wide applications in various computer vision tasks. In autonomous driving, LIDAR sensors are adopted to acquire depth measurements around the vehicle to perceive the surrounding environments. However, depth maps obtained by LIDAR are generally sparse because of its hardware limitation. The task of depth completion attracts increasing attention, which aims at generating a dense depth map from an input sparse depth map. To effectively utilize multi-scale features, we propose three novel sparsity-invariant operations, based on which, a sparsity-invariant multi-scale encoder-decoder network (HMS-Net) for handling sparse inputs and sparse feature maps is also proposed. Additional RGB features could be incorporated to further improve the depth completion performance. Our extensive experiments and component analysis on two public benchmarks, KITTI depth completion benchmark and NYU-depth-v2 dataset, demonstrate the effectiveness of the proposed approach. As of Aug. 12th, 2018, on KITTI depth completion leaderboard, our proposed model without RGB guidance ranks first among all peer-reviewed methods without using RGB information, and our model with RGB guidance ranks second among all RGB-guided methods.
updated: Thu Feb 20 2020 18:19:25 GMT+0000 (UTC)
published: Mon Aug 27 2018 04:43:34 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト