arXiv reaDer
Ada3D : 適応推論による空間冗長性の活用による効率的な 3D オブジェクト検出
Ada3D : Exploiting the Spatial Redundancy with Adaptive Inference for Efficient 3D Object Detection
ボクセルベースの手法は、自動運転における 3D 物体検出の最先端のパフォーマンスを達成しました。ただし、計算コストとメモリコストが膨大であるため、リソースに制約のある車両への適用には課題​​が生じます。このリソース消費量が多くなる理由の 1 つは、LiDAR 点群に多数の冗長な背景点が存在し、その結果、3D ボクセル表現と高密度 BEV マップ表現の両方に空間的冗長性が生じることです。この問題に対処するために、入力レベルの空間冗長性の活用に焦点を当てた、Ada3D と呼ばれる適応推論フレームワークを提案します。 Ada3D は、軽量の重要度予測子と Lidar 点群の固有のプロパティに基づいて、冗長な入力を適応的にフィルタリングします。さらに、スパース性保持バッチ正規化を導入することで、BEV 機能の固有のスパース性を利用します。 Ada3D を使用すると、精度を犠牲にすることなく 3D ボクセルの 40% 削減を達成し、2D BEV 特徴マップの密度を 100% から 20% に減らすことができます。 Ada3D は、モデルの計算コストとメモリ コストを 5 分の 1 に削減し、3D および 2D バックボーンでそれぞれ 1.52 倍/1.45 倍のエンドツーエンド GPU レイテンシーと 1.5 倍/4.5 倍の GPU ピーク メモリ最適化を実現します。
Voxel-based methods have achieved state-of-the-art performance for 3D object detection in autonomous driving. However, their significant computational and memory costs pose a challenge for their application to resource-constrained vehicles. One reason for this high resource consumption is the presence of a large number of redundant background points in Lidar point clouds, resulting in spatial redundancy in both 3D voxel and dense BEV map representations. To address this issue, we propose an adaptive inference framework called Ada3D, which focuses on exploiting the input-level spatial redundancy. Ada3D adaptively filters the redundant input, guided by a lightweight importance predictor and the unique properties of the Lidar point cloud. Additionally, we utilize the BEV features' intrinsic sparsity by introducing the Sparsity Preserving Batch Normalization. With Ada3D, we achieve 40% reduction for 3D voxels and decrease the density of 2D BEV feature maps from 100% to 20% without sacrificing accuracy. Ada3D reduces the model computational and memory cost by 5x, and achieves 1.52x/1.45x end-to-end GPU latency and 1.5x/4.5x GPU peak memory optimization for the 3D and 2D backbone respectively.
updated: Wed Aug 09 2023 03:18:27 GMT+0000 (UTC)
published: Mon Jul 17 2023 02:58:51 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト