arXiv reaDer
Meta-RangeSeg: 複数の機能集約を使用した LiDAR シーケンス セマンティック セグメンテーション
Meta-RangeSeg: LiDAR Sequence Semantic Segmentation Using Multiple Feature Aggregation
LiDAR センサーは、自動運転車やインテリジェント ロボットの認識システムに不可欠です。実際のアプリケーションでリアルタイム要件を満たすには、LiDAR スキャンを効率的にセグメント化する必要があります。以前のアプローチのほとんどは、3D 点群を 2D 球面距離画像に直接投影するため、画像セグメンテーションに効率的な 2D 畳み込み演算を利用できます。有望な結果を達成しましたが、近隣情報は球面図法で十分に保存されていません。さらに、一時的な情報は、シングル スキャン セグメンテーション タスクでは考慮されません。これらの問題に取り組むために、Meta-RangeSeg という名前の LiDAR シーケンスのセマンティック セグメンテーションへの新しいアプローチを提案します。ここでは、時空間情報をキャプチャするために新しい範囲残差画像表現が導入されます。具体的には、Meta-Kernel を使用してメタ特徴を抽出します。これにより、2D 距離画像座標入力と 3D デカルト座標出力の間の不一致が減少します。マルチスケール機能を取得するために、効率的な U-Net バックボーンが使用されます。さらに、Feature Aggregation Module (FAM) は、範囲チャネルの役割を強化し、さまざまなレベルで機能を集約します。 SemanticKITTI と SemanticPOSS のパフォーマンス評価のために広範な実験を実施しました。有望な結果は、提案された Meta-RangeSeg メソッドが既存のアプローチよりも効率的かつ効果的であることを示しています。完全な実装は、https://github.com/songw-zju/Meta-RangeSeg で公開されています。
LiDAR sensor is essential to the perception system in autonomous vehicles and intelligent robots. To fulfill the real-time requirements in real-world applications, it is necessary to efficiently segment the LiDAR scans. Most of previous approaches directly project 3D point cloud onto the 2D spherical range image so that they can make use of the efficient 2D convolutional operations for image segmentation. Although having achieved the encouraging results, the neighborhood information is not well-preserved in the spherical projection. Moreover, the temporal information is not taken into consideration in the single scan segmentation task. To tackle these problems, we propose a novel approach to semantic segmentation for LiDAR sequences named Meta-RangeSeg, where a new range residual image representation is introduced to capture the spatial-temporal information. Specifically, Meta-Kernel is employed to extract the meta features, which reduces the inconsistency between the 2D range image coordinates input and 3D Cartesian coordinates output. An efficient U-Net backbone is used to obtain the multi-scale features. Furthermore, Feature Aggregation Module (FAM) strengthens the role of range channel and aggregates features at different levels. We have conducted extensive experiments for performance evaluation on SemanticKITTI and SemanticPOSS. The promising results show that our proposed Meta-RangeSeg method is more efficient and effective than the existing approaches. Our full implementation is publicly available at https://github.com/songw-zju/Meta-RangeSeg .
updated: Thu Sep 15 2022 08:06:50 GMT+0000 (UTC)
published: Sun Feb 27 2022 14:46:13 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト