arXiv reaDer
BSH-Det3D: BEV 形状ヒートマップによる 3D オブジェクト検出の改善
BSH-Det3D: Improving 3D Object Detection with BEV Shape Heatmap
LiDAR ベースの 3D オブジェクト検出の進歩により、自動運転とロボティクスの開発が大幅に強化されました。ただし、LiDAR センサーの限界により、オブジェクトの形状は、遮蔽された領域や離れた領域で劣化し、3D 認識に対する根本的な課題が生じます。既存の方法は、特定の 3D 形状を推定し、優れたパフォーマンスを達成します。ただし、これらの方法は大規模な計算とメモリに依存しているため、精度とリアルタイム パフォーマンスのバランスが崩れます。この課題に取り組むために、BSH-Det3D という名前の新しい LiDAR ベースの 3D オブジェクト検出モデルを提案します。これは、鳥瞰図 (BEV) から完全な形状を推定することによって空間的特徴を強化する効果的な方法を適用します。具体的には、ピラーベースの形状補完 (PSC) モジュールを設計して、ピラーにオブジェクト形状が含まれているかどうかの占有確率を予測します。 PSC モジュールは、シーンごとに BEV シェイプ ヒートマップを生成します。ヒートマップと統合した後、BSH-Det3D は形状劣化領域に追加情報を提供し、高品質の 3D 提案を生成できます。また、アテンションベースの高密度化融合モジュール (ADF) を設計して、スパース機能をヒートマップと生のポイントに適応的に関連付けます。 ADF モジュールは、点と形状の知識の利点をごくわずかなオーバーヘッドで統合します。 KITTI ベンチマークでの広範な実験により、精度と速度の点で最先端 (SOTA) のパフォーマンスが達成され、BSH-Det3D の効率と柔軟性が実証されました。ソース コードは https://github.com/mystorm16/BSH-Det3D で入手できます。
The progress of LiDAR-based 3D object detection has significantly enhanced developments in autonomous driving and robotics. However, due to the limitations of LiDAR sensors, object shapes suffer from deterioration in occluded and distant areas, which creates a fundamental challenge to 3D perception. Existing methods estimate specific 3D shapes and achieve remarkable performance. However, these methods rely on extensive computation and memory, causing imbalances between accuracy and real-time performance. To tackle this challenge, we propose a novel LiDAR-based 3D object detection model named BSH-Det3D, which applies an effective way to enhance spatial features by estimating complete shapes from a bird's eye view (BEV). Specifically, we design the Pillar-based Shape Completion (PSC) module to predict the probability of occupancy whether a pillar contains object shapes. The PSC module generates a BEV shape heatmap for each scene. After integrating with heatmaps, BSH-Det3D can provide additional information in shape deterioration areas and generate high-quality 3D proposals. We also design an attention-based densification fusion module (ADF) to adaptively associate the sparse features with heatmaps and raw points. The ADF module integrates the advantages of points and shapes knowledge with negligible overheads. Extensive experiments on the KITTI benchmark achieve state-of-the-art (SOTA) performance in terms of accuracy and speed, demonstrating the efficiency and flexibility of BSH-Det3D. The source code is available on https://github.com/mystorm16/BSH-Det3D.
updated: Fri Mar 03 2023 15:13:11 GMT+0000 (UTC)
published: Fri Mar 03 2023 15:13:11 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト