単眼3Dオブジェクト検出は、一般的なマルチセンサーシステムと比較してシンプルな構成でソリューションを提供するため、自動運転車にとって重要な問題です。単眼3D検出の主な課題は、オブジェクトの深さを正確に予測することです。これは、直接距離測定がないため、オブジェクトとシーンの手がかりから推測する必要があります。多くの方法は、3D検出を支援するために深度を直接推定しようとしますが、深度の不正確さの結果としてパフォーマンスが制限されます。提案されたソリューションであるCategoricalDepth Distribution Network(CaDDN)は、各ピクセルの予測されたカテゴリ深度分布を使用して、豊富なコンテキスト特徴情報を3D空間の適切な深度間隔に投影します。次に、計算効率の高い鳥瞰図投影と単一ステージ検出器を使用して、最終的な出力境界ボックスを生成します。 CaDDNは、関節の深さの推定と物体検出のための完全に微分可能なエンドツーエンドのアプローチとして設計されています。公開されている単眼法の中で1位にランクされているKITTI3Dオブジェクト検出ベンチマークでアプローチを検証します。また、新しくリリースされたWaymo OpenDatasetで最初の単眼3D検出結果を提供します。 CaDDNのソースコードは、公開前に公開されます。
Monocular 3D object detection is a key problem for autonomous vehicles, as it provides a solution with simple configuration compared to typical multi-sensor systems. The main challenge in monocular 3D detection lies in accurately predicting object depth, which must be inferred from object and scene cues due to the lack of direct range measurement. Many methods attempt to directly estimate depth to assist in 3D detection, but show limited performance as a result of depth inaccuracy. Our proposed solution, Categorical Depth Distribution Network (CaDDN), uses a predicted categorical depth distribution for each pixel to project rich contextual feature information to the appropriate depth interval in 3D space. We then use the computationally efficient bird's-eye-view projection and single-stage detector to produce the final output bounding boxes. We design CaDDN as a fully differentiable end-to-end approach for joint depth estimation and object detection. We validate our approach on the KITTI 3D object detection benchmark, where we rank 1st among published monocular methods. We also provide the first monocular 3D detection results on the newly released Waymo Open Dataset. The source code for CaDDN will be made publicly available before publication.