点座標から効率的に高次元の特徴を抽出するための点間接続を発見することは、点群を処理する上での重要な課題です。ほとんどの既存の方法は、グローバル接続を無視しながら効率的なローカル特徴抽出器を設計することに重点を置いています。この論文では、ローカルとグローバルの両方の注意を考慮する、3D ポイント間関係を学習するための新しい誘導バイアス支援トランス (IBT) メソッドを設計します。具体的には、局所的な空間コヒーレンスを考慮して、相対位置エンコーディングと注意深い特徴プーリングによって局所的な特徴学習を行います。学習した局所性を Transformer モジュールに組み込みます。ローカル機能は、Transformer の値コンポーネントに影響を与えて、各ポイントのチャネル間の関係を調整します。これにより、局所性ベースのチャネル相互作用で自己注意メカニズムを強化できます。分類とセグメンテーションのタスクで実験的にその優位性を示します。コードは https://github.com/jiamang/IBT で入手できます。
Discovering inter-point connection for efficient high-dimensional feature extraction from point coordinate is a key challenge in processing point cloud. Most existing methods focus on designing efficient local feature extractors while ignoring global connection, or vice versa. In this paper, we design a new Inductive Bias-aided Transformer (IBT) method to learn 3D inter-point relations, which considers both local and global attentions. Specifically, considering local spatial coherence, local feature learning is performed through Relative Position Encoding and Attentive Feature Pooling. We incorporate the learned locality into the Transformer module. The local feature affects value component in Transformer to modulate the relationship between channels of each point, which can enhance self-attention mechanism with locality based channel interaction. We demonstrate its superiority experimentally on classification and segmentation tasks. The code is available at: https://github.com/jiamang/IBT