arXiv reaDer
Task-Aware Monocular Depth Estimation for 3D Object Detection
 単眼深度推定により、単一の2D画像から3D知覚が可能になるため、長年にわたって多くの研究の注目を集めています。ほとんどすべてのメソッドは、画像の前景領域と背景領域(「ものともの」)を等しく扱います。ただし、すべてのピクセルが等しいわけではありません。前景オブジェクトの深度は、3Dオブジェクトの認識とローカリゼーションにおいて重要な役割を果たします。現在まで、前景オブジェクトの深度予測精度を高める方法についてはほとんど議論されていません。この論文では、まず前景と背景のデータ分布と相互作用を分析し、次に前景と背景を分離した単眼深度推定(ForeSeE)メソッドを提案し、個別の最適化目標と深度デコーダーを使用して前景深度と背景深度を推定します。この方法により、前景オブジェクトの深度推定パフォーマンスが大幅に向上します。 ForeSeEを3Dオブジェクト検出に適用すると、7.5 APゲインを達成し、他の単眼方式の中でも特に最新の結果を設定します。コードは、で入手できます。
Monocular depth estimation enables 3D perception from a single 2D image, thus attracting much research attention for years. Almost all methods treat foreground and background regions ("things and stuff") in an image equally. However, not all pixels are equal. Depth of foreground objects plays a crucial role in 3D object recognition and localization. To date how to boost the depth prediction accuracy of foreground objects is rarely discussed. In this paper, we first analyse the data distributions and interaction of foreground and background, then propose the foreground-background separated monocular depth estimation (ForeSeE) method, to estimate the foreground depth and background depth using separate optimization objectives and depth decoders. Our method significantly improves the depth estimation performance on foreground objects. Applying ForeSeE to 3D object detection, we achieve 7.5 AP gains and set new state-of-the-art results among other monocular methods. Code will be available at:
updated: Mon Dec 09 2019 10:15:56 GMT+0000 (UTC)
published: Tue Sep 17 2019 10:24:17 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト