この作業では、ALS点群のセマンティックラベリングに焦点を当てた新しいニューラルネットワークを提案します。これは、長距離の空間的およびチャネルごとの関係の重要性を調査し、グローバルな関係認識注意ネットワーク(GraNet)と呼ばれます。 GraNetは最初に、ローカル空間不一致注意畳み込みモジュール(LoSDA)を使用して、ローカルの幾何学的記述とローカル依存関係を学習します。 LoSDAでは、方向情報、空間分布、および標高の違いは、いくつかのローカル空間幾何学学習モジュールをスタックすることによって完全に考慮され、ローカル依存関係は注意プーリングモジュールを使用して埋め込まれます。次に、空間関係認識注意モジュール(SRA)とチャネル関係認識注意モジュール(CRA)で構成されるグローバル関係認識注意モジュール(GRA)を調査して、グローバルな空間的およびチャネルごとの関係をさらに学習します。任意の空間位置と特徴ベクトル。前述の2つの重要なモジュールは、大都市圏の規模の変化をさらに検討するために、マルチスケールネットワークアーキテクチャに組み込まれています。提案されたフレームワークのパフォーマンスを評価するために、2つのALSポイントクラウドデータセットに対して包括的な実験を実施しました。結果は、私たちの方法が他の一般的に使用される高度な分類方法と比較してより高い分類精度を達成できることを示しています。 ISPRSベンチマークデータセットでのメソッドの全体的な精度(OA)を84.5%に改善して、9つのセマンティッククラスを分類できます。平均F1メジャー(AvgF1)は73.5%です。詳細には、オブジェクトクラスごとに次のF1値があります:電力線:66.3%、低植生:82.8%、不浸透性表面:91.8%、車:80.7%、フェンス:51.2%、屋根:94.6%、ファサード:62.1%、低木:49.9%、樹木:82.1%。さらに、高密度の都市部をカバーする新しいALSポイントクラウドデータセットを使用して実験が行われました。
In this work, we propose a novel neural network focusing on semantic labeling of ALS point clouds, which investigates the importance of long-range spatial and channel-wise relations and is termed as global relation-aware attentional network (GraNet). GraNet first learns local geometric description and local dependencies using a local spatial discrepancy attention convolution module (LoSDA). In LoSDA, the orientation information, spatial distribution, and elevation differences are fully considered by stacking several local spatial geometric learning modules and the local dependencies are embedded by using an attention pooling module. Then, a global relation-aware attention module (GRA), consisting of a spatial relation-aware attention module (SRA) and a channel relation aware attention module (CRA), are investigated to further learn the global spatial and channel-wise relationship between any spatial positions and feature vectors. The aforementioned two important modules are embedded in the multi-scale network architecture to further consider scale changes in large urban areas. We conducted comprehensive experiments on two ALS point cloud datasets to evaluate the performance of our proposed framework. The results show that our method can achieve higher classification accuracy compared with other commonly used advanced classification methods. The overall accuracy (OA) of our method on the ISPRS benchmark dataset can be improved to 84.5% to classify nine semantic classes, with an average F1 measure (AvgF1) of 73.5%. In detail, we have following F1 values for each object class: powerlines: 66.3%, low vegetation: 82.8%, impervious surface: 91.8%, car: 80.7%, fence: 51.2%, roof: 94.6%, facades: 62.1%, shrub: 49.9%, trees: 82.1%. Besides, experiments were conducted using a new ALS point cloud dataset covering highly dense urban areas.