arXiv reaDer
GPA-3D: 点群からの教師なしドメイン適応型 3D オブジェクト検出のためのジオメトリ対応プロトタイプ アライメント
GPA-3D: Geometry-aware Prototype Alignment for Unsupervised Domain Adaptive 3D Object Detection from Point Clouds
LiDAR ベースの 3D 検出は、近年大きく進歩しました。ただし、3D 検出器のパフォーマンスは、目に見えない環境に導入される場合、深刻なドメイン ギャップの問題により大幅に制限されます。既存のドメイン適応型 3D 検出方法は、特徴空間の分布の不一致の問題を適切に考慮していないため、ドメイン全体にわたる検出器の一般化が妨げられています。この研究では、新しい教師なしドメイン適応型 3D 検出フレームワーク、すなわち幾何学認識プロトタイプ アライメント (GPA-3D) を提案します。これは、点群オブジェクトからの固有の幾何学的関係を明示的に利用して、特徴の不一致を低減し、それによってクロスドメイン転送を容易にします。 。具体的には、GPA-3D は、調整された学習可能な一連のプロトタイプを、明確な幾何学的構造を持つ点群オブジェクトに割り当てます。各プロトタイプは、ソース ドメインとターゲット ドメイン上の対応する点群オブジェクトから派生した BEV (鳥瞰図) 特徴を調整し、分布の不一致を減らし、より適切な適応を実現します。 Waymo、nuScenes、KITTI などのさまざまなベンチマークで得られた評価結果は、さまざまな適応シナリオに対する最先端のアプローチに対する GPA-3D の優位性を示しています。 MindSpore のバージョン コードは、https://github.com/Liz66666/GPA3D で公開されます。
LiDAR-based 3D detection has made great progress in recent years. However, the performance of 3D detectors is considerably limited when deployed in unseen environments, owing to the severe domain gap problem. Existing domain adaptive 3D detection methods do not adequately consider the problem of the distributional discrepancy in feature space, thereby hindering generalization of detectors across domains. In this work, we propose a novel unsupervised domain adaptive 3D detection framework, namely Geometry-aware Prototype Alignment (GPA-3D), which explicitly leverages the intrinsic geometric relationship from point cloud objects to reduce the feature discrepancy, thus facilitating cross-domain transferring. Specifically, GPA-3D assigns a series of tailored and learnable prototypes to point cloud objects with distinct geometric structures. Each prototype aligns BEV (bird's-eye-view) features derived from corresponding point cloud objects on source and target domains, reducing the distributional discrepancy and achieving better adaptation. The evaluation results obtained on various benchmarks, including Waymo, nuScenes and KITTI, demonstrate the superiority of our GPA-3D over the state-of-the-art approaches for different adaptation scenarios. The MindSpore version code will be publicly available at https://github.com/Liz66666/GPA3D.
updated: Wed Aug 16 2023 04:15:21 GMT+0000 (UTC)
published: Wed Aug 16 2023 04:15:21 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト