LiDARスキャンフルシーンセマンティックセグメンテーション(LiDARNet)の境界認識ドメイン適応モデルを提示します。私たちのモデルは、2つのブランチ構造でドメインプライベート機能とドメイン共有機能の両方を抽出できます。 Gated-SCNNをLiDARNetのセグメンテーションコンポーネントに埋め込み、フルシーンのセマンティックセグメンテーションラベルの予測を学習しながら境界情報を学習しました。さらに、ドメイン共有機能とプライベート機能を使用して2つのドメイン間のマッピングを学習するようにモデルを誘導することにより、ドメインギャップをさらに削減します。さらに、LiDARポイントクラウドセマンティックセグメンテーションのドメイン適応のための新しいデータセット(SemanticUSLTheアクセスアドレスSemanticUSL:https://unmannedlab.github.io/research/SemanticUSL)を導入します。データセットは、SemanticKITTIと同じデータ形式とオントロジーを持っています。チャネル分布、反射率分布、シーンの多様性、センサーのセットアップに違いがある実際のデータセットSemanticKITTI、SemanticPOSS、およびSemanticUSLで実験を行いました。私たちのアプローチを使用すると、両方のドメインで機能する単一の投影ベースのLiDARフルシーンセマンティックセグメンテーションモデルを取得できます。私たちのモデルは、適応後もソースドメインでほぼ同じパフォーマンスを維持し、ターゲットドメインで8%〜22%のmIoUパフォーマンスを向上させることができます。
We present a boundary-aware domain adaptation model for LiDAR scan full-scene semantic segmentation (LiDARNet). Our model can extract both the domain private features and the domain shared features with a two-branch structure. We embedded Gated-SCNN into the segmentor component of LiDARNet to learn boundary information while learning to predict full-scene semantic segmentation labels. Moreover, we further reduce the domain gap by inducing the model to learn a mapping between two domains using the domain shared and private features. Additionally, we introduce a new dataset (SemanticUSLThe access address of SemanticUSL:https://unmannedlab.github.io/research/SemanticUSL) for domain adaptation for LiDAR point cloud semantic segmentation. The dataset has the same data format and ontology as SemanticKITTI. We conducted experiments on real-world datasets SemanticKITTI, SemanticPOSS, and SemanticUSL, which have differences in channel distributions, reflectivity distributions, diversity of scenes, and sensors setup. Using our approach, we can get a single projection-based LiDAR full-scene semantic segmentation model working on both domains. Our model can keep almost the same performance on the source domain after adaptation and get an 8%-22% mIoU performance increase in the target domain.