単一のRGB画像から深度マップを推定することは、ローカリゼーション、マッピング、および3次元オブジェクト検出のために広く研究されてきました。シングルビュー深度推定に関する最近の研究は、ほとんどが深い畳み込みニューラルネットワーク(ConvNets)に基づいており、高密度の注釈付きラベルと組み合わせた大量のトレーニングデータを必要とします。深度注釈タスクは費用がかかり非効率的であるため、非常に簡単に収集できるRGB画像を活用して、深度ラベルのないConvNetのパフォーマンスを向上させることは避けられません。ただし、ほとんどの自己教師あり学習アルゴリズムは、画像の意味情報をキャプチャして、深度推定ではなく、分類またはオブジェクト検出のパフォーマンスを向上させることに重点を置いています。この論文では、既存の自己教師あり方法が深度推定でうまく機能しないことを示し、ConvNetsがラベルのない画像で幾何学的情報を抽出するのに役立つ運動量コントラスト損失を伴う勾配ベースの自己教師あり学習アルゴリズムを提案します。その結果、ネットワークは、比較的少量の注釈付きデータを使用して深度マップを正確に推定できます。私たちの方法がモデル構造から独立していることを示すために、2つの異なる単眼深度推定アルゴリズムを使用して私たちの方法を評価します。私たちの方法は、以前の最先端の自己教師あり学習アルゴリズムよりも優れており、NYU Depthv2データセットでのランダムな初期化と比較して3倍のラベル付きデータの効率を示しています。
Estimating a depth map from a single RGB image has been investigated widely for localization, mapping, and 3-dimensional object detection. Recent studies on a single-view depth estimation are mostly based on deep Convolutional neural Networks (ConvNets) which require a large amount of training data paired with densely annotated labels. Depth annotation tasks are both expensive and inefficient, so it is inevitable to leverage RGB images which can be collected very easily to boost the performance of ConvNets without depth labels. However, most self-supervised learning algorithms are focused on capturing the semantic information of images to improve the performance in classification or object detection, not in depth estimation. In this paper, we show that existing self-supervised methods do not perform well on depth estimation and propose a gradient-based self-supervised learning algorithm with momentum contrastive loss to help ConvNets extract the geometric information with unlabeled images. As a result, the network can estimate the depth map accurately with a relatively small amount of annotated data. To show that our method is independent of the model structure, we evaluate our method with two different monocular depth estimation algorithms. Our method outperforms the previous state-of-the-art self-supervised learning algorithms and shows the efficiency of labeled data in triple compared to random initialization on the NYU Depth v2 dataset.