arXiv reaDer
3DLG-Detector: ローカルとグローバルの同時特徴学習による 3D オブジェクト検出
3DLG-Detector: 3D Object Detection via Simultaneous Local-Global Feature Learning
不規則な点群のローカルとグローバルの両方の特徴をキャプチャすることは、3D オブジェクト検出 (3OD) に不可欠です。ただし、VoteNet やその亜種などの主流の 3D 検出器は、プーリング操作中にかなりのローカル機能を放棄するか、シーン全体のコンテキストで多くのグローバル機能を無視します。このホワイト ペーパーでは、3OD を積極的に提供するシーン ポイント クラウドのローカル/グローバル機能を同時に学習するための新しいモジュールについて説明します。この目的のために、ローカルとグローバルの同時特徴学習 (3DLG-Detector と呼ばれる) を介した効果的な 3OD ネットワークを提案します。 3DLG-Detector には 2 つの重要な貢献があります。まず、プーリング中に効果的なローカル機能を保持する Dynamic Points Interaction (DPI) モジュールを開発します。さらに、DPI は取り外し可能で、既存の 3OD ネットワークに組み込んでパフォーマンスを向上させることができます。次に、グローバル コンテキスト集約モジュールを開発して、エンコーダーのさまざまなレイヤーからマルチスケール機能を集約し、シーンのコンテキスト認識を実現します。私たちの方法は、SUN RGB-D と ScanNet データセットの両方で、検出精度と堅牢性の点で 13 の競合他社よりも優れていることを示しています。ソースコードは公開時に入手できます。
Capturing both local and global features of irregular point clouds is essential to 3D object detection (3OD). However, mainstream 3D detectors, e.g., VoteNet and its variants, either abandon considerable local features during pooling operations or ignore many global features in the whole scene context. This paper explores new modules to simultaneously learn local-global features of scene point clouds that serve 3OD positively. To this end, we propose an effective 3OD network via simultaneous local-global feature learning (dubbed 3DLG-Detector). 3DLG-Detector has two key contributions. First, it develops a Dynamic Points Interaction (DPI) module that preserves effective local features during pooling. Besides, DPI is detachable and can be incorporated into existing 3OD networks to boost their performance. Second, it develops a Global Context Aggregation module to aggregate multi-scale features from different layers of the encoder to achieve scene context-awareness. Our method shows improvements over thirteen competitors in terms of detection accuracy and robustness on both the SUN RGB-D and ScanNet datasets. Source code will be available upon publication.
updated: Wed Aug 31 2022 12:23:40 GMT+0000 (UTC)
published: Wed Aug 31 2022 12:23:40 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト