学習した点群表現は、センサーまでの距離が長くなると一般化されません。たとえば、60メートルを超える範囲では、LIDARポイントクラウドのスパース性は、人間でさえオブジェクトの形状を互いに識別できないポイントに達します。ただし、この距離は、高速で移動する車両の場合はそれほど遠くないと見なす必要があります。車両は、時速70マイルで移動しながら2秒未満で60メートルを移動できます。安全で堅牢な運転の自動化には、これらの範囲での鋭い3Dオブジェクト検出が不可欠です。このような背景から、遠方錐台を紹介します。遠方の物体を検出するための新しい融合戦略です。主な戦略は、オブジェクトの形状が深度の増加に伴って大幅に変化しないため、オブジェクトクラスを認識するために2Dビジョンのみに依存し、遠くのオブジェクトの3D空間でのオブジェクトのローカリゼーションに点群データを使用することです。より近いオブジェクトの場合は、代わりに、最先端の方法に従って、学習した点群表現を使用します。この戦略は、学習した点群表現を使用してオブジェクト検出の主な欠点を軽減します。 KITTIデータセットでの実験は、私たちの方法が、鳥瞰図および3Dでの遠方の物体検出に関して、最先端の方法よりもかなり優れていることを示しています。私たちのコードはオープンソースで公開されています:https://github.com/dongfang-steven-yang/faraway-frustum。
Learned pointcloud representations do not generalize well with an increase in distance to the sensor. For example, at a range greater than 60 meters, the sparsity of lidar pointclouds reaches to a point where even humans cannot discern object shapes from each other. However, this distance should not be considered very far for fast-moving vehicles: A vehicle can traverse 60 meters under two seconds while moving at 70 mph. For safe and robust driving automation, acute 3D object detection at these ranges is indispensable. Against this backdrop, we introduce faraway-frustum: a novel fusion strategy for detecting faraway objects. The main strategy is to depend solely on the 2D vision for recognizing object class, as object shape does not change drastically with an increase in depth, and use pointcloud data for object localization in the 3D space for faraway objects. For closer objects, we use learned pointcloud representations instead, following state-of-the-art. This strategy alleviates the main shortcoming of object detection with learned pointcloud representations. Experiments on the KITTI dataset demonstrate that our method outperforms state-of-the-art by a considerable margin for faraway object detection in bird's-eye-view and 3D. Our code is open-source and publicly available: https://github.com/dongfang-steven-yang/faraway-frustum.