3D ポイント クラウド解析では、ローカル フィーチャとコンテキスト依存関係が重要です。コンテキストの依存関係を利用する、より優れたローカル畳み込みカーネルの設計に多くの研究が費やされてきました。ただし、現在の点畳み込みには、さまざまな点群密度に対する堅牢性がありません。さらに、コンテキスト モデリングは、計算コストの高い非ローカル モデルまたは自己注意モデルによって支配されています。これらの問題を解決するために、DAConv という造語である密度適応畳み込みを提案します。重要なアイデアは、点密度と位置から得られた幾何学的接続から畳み込み重みを適応的に学習することです。より少ない計算で正確なコンテキスト依存関係を抽出するために、空間情報をさまざまな空間方向に沿ってチャネルの注意に埋め込むインタラクティブな注意モジュール (IAM) を提案します。 DAConv と IAM は階層ネットワーク アーキテクチャに統合されており、点群解析のためのローカル密度とコンテキストに応じた方向認識学習を実現します。実験は、DAConv が既存の方法と比較して点密度に対して大幅に堅牢であることを示し、挑戦的な 3D 点群データセットの広範な比較により、ネットワークが ModelNet40 で 93.6% の最先端の分類結果、68.71 の競争力のあるセマンティック セグメンテーション結果を達成することを示しています。 S3DIS で % mIoU、ShapeNet で 86.7% mIoU のパーツ セグメンテーション結果。
Local features and contextual dependencies are crucial for 3D point cloud analysis. Many works have been devoted to designing better local convolutional kernels that exploit the contextual dependencies. However, current point convolutions lack robustness to varying point cloud density. Moreover, contextual modeling is dominated by non-local or self-attention models which are computationally expensive. To solve these problems, we propose density adaptive convolution, coined DAConv. The key idea is to adaptively learn the convolutional weights from geometric connections obtained from the point density and position. To extract precise context dependencies with fewer computations, we propose an interactive attention module (IAM) that embeds spatial information into channel attention along different spatial directions. DAConv and IAM are integrated in a hierarchical network architecture to achieve local density and contextual direction-aware learning for point cloud analysis. Experiments show that DAConv is significantly more robust to point density compared to existing methods and extensive comparisons on challenging 3D point cloud datasets show that our network achieves state-of-the-art classification results of 93.6% on ModelNet40, competitive semantic segmentation results of 68.71% mIoU on S3DIS and part segmentation results of 86.7% mIoU on ShapeNet.