arXiv reaDer
Self-Supervised Monocular Depth Hints
  単眼深度推定器は、高品質のレーザースキャンまたはその他の地上真実データの必要性を回避するために、両眼ステレオデータからのさまざまな形式の自己監視でトレーニングできます。ただし、不利な点は、自己監視学習で使用される測光再投影損失には、通常、複数の極小値があることです。グラウンドトゥルースに対するこれらのもっともらしい外観は、回帰ネットワークが学習することを制限し、品質が制限された深度マップを予測させる可能性があります。顕著な例の1つとして、現在の最先端の手法では、薄い構造の周囲の深さの不連続性が誤って推定されることがよくあります。ここでは、ステレオベースの自己監視からの深度予測におけるあいまいな再投影の問題を研究し、その効果を軽減するために深度ヒントを導入します。深さのヒントは、簡単な既製のステレオアルゴリズムから得られる補完的な深さの提案です。これらのヒントは、既存の測光損失関数を強化し、より良い重みを学習するためにネットワークを導くために使用されます。追加のデータは不要であり、場合によってのみ正しいと見なされます。 Depth Hintsを使用すると、私たち自身だけでなく、いくつかの主要な自己管理型ステレオモデルをトレーニングする際に大幅な効果が得られることがわかります。さらに、他のグッドプラクティスと組み合わせて、KITTIベンチマークで最先端の深度予測を作成します。
Monocular depth estimators can be trained with various forms of self-supervision from binocular-stereo data to circumvent the need for high-quality laser scans or other ground-truth data. The disadvantage, however, is that the photometric reprojection losses used with self-supervised learning typically have multiple local minima. These plausible-looking alternatives to ground truth can restrict what a regression network learns, causing it to predict depth maps of limited quality. As one prominent example, depth discontinuities around thin structures are often incorrectly estimated by current state-of-the-art methods. Here, we study the problem of ambiguous reprojections in depth prediction from stereo-based self-supervision, and introduce Depth Hints to alleviate their effects. Depth Hints are complementary depth suggestions obtained from simple off-the-shelf stereo algorithms. These hints enhance an existing photometric loss function, and are used to guide a network to learn better weights. They require no additional data, and are assumed to be right only sometimes. We show that using our Depth Hints gives a substantial boost when training several leading self-supervised-from-stereo models, not just our own. Further, combined with other good practices, we produce state-of-the-art depth predictions on the KITTI benchmark.
updated: Thu Sep 19 2019 15:41:07 GMT+0000 (UTC)
published: Thu Sep 19 2019 15:41:07 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト