各ポイントにセマンティックカテゴリを割り当てることを目的としたポイントクラウドのセマンティックセグメンテーションは、3Dシーンの理解に不可欠です。近年の大幅な進歩にもかかわらず、既存の方法のほとんどは、オブジェクトレベルの誤分類または境界レベルのあいまいさのいずれかに悩まされています。このホワイトペーパーでは、GeoSegNetと呼ばれる点群のジオメトリを深く調査することにより、堅牢なセマンティックセグメンテーションネットワークを紹介します。私たちのGeoSegNetは、マルチジオメトリベースのエンコーダーと境界ガイドデコーダーで構成されています。エンコーダーでは、オブジェクトレベルの特徴を抽出するために、マルチジオメトリの観点から新しい残差ジオメトリモジュールを開発します。デコーダーでは、境界点の幾何学的表現を強化するために、対照的な境界学習モジュールを導入します。幾何学的なエンコーダー-デコーダーモデリングの恩恵を受けて、GeoSegNetは、2つ以上のオブジェクトの交差(境界)を明確にしながら、オブジェクトのセグメンテーションを効果的に推測できます。実験では、全体的なセグメンテーションの精度とオブジェクトの境界の明確さの点で、競合他社よりも明らかに改善されていることが示されています。コードはhttps://github.com/Chen-yuiyui/GeoSegNetで入手できます。
Semantic segmentation of point clouds, aiming to assign each point a semantic category, is critical to 3D scene understanding.Despite of significant advances in recent years, most of existing methods still suffer from either the object-level misclassification or the boundary-level ambiguity. In this paper, we present a robust semantic segmentation network by deeply exploring the geometry of point clouds, dubbed GeoSegNet. Our GeoSegNet consists of a multi-geometry based encoder and a boundary-guided decoder. In the encoder, we develop a new residual geometry module from multi-geometry perspectives to extract object-level features. In the decoder, we introduce a contrastive boundary learning module to enhance the geometric representation of boundary points. Benefiting from the geometric encoder-decoder modeling, our GeoSegNet can infer the segmentation of objects effectively while making the intersections (boundaries) of two or more objects clear. Experiments show obvious improvements of our method over its competitors in terms of the overall segmentation accuracy and object boundary clearness. Code is available at https://github.com/Chen-yuiyui/GeoSegNet.