arXiv reaDer
3D点群のスーパーポイントガイド付き半教師ありセマンティックセグメンテーション
Superpoint-guided Semi-supervised Semantic Segmentation of 3D Point Clouds
3Dポイントクラウドのセマンティックセグメンテーションは、コンピュータビジョンの分野で難しいトピックです。文献にある既存の方法のほとんどは、完全にラベル付けされた大量のトレーニングデータを必要としますが、大量の点群に手動でラベルを付けてこれらのトレーニングデータを取得するには非常に時間がかかります。この問題に対処するために、3Dポイントクラウド用のスーパーポイントガイド付き半教師ありセグメンテーションネットワークを提案します。これは、ネットワークトレーニングにラベル付きシーンポイントクラウドのごく一部とラベルなしポイントクラウドの多数を共同で利用します。提案されたネットワークは、予測された疑似ラベルで繰り返し更新されます。ここでは、3Dポイントクラウドからスーパーポイントを抽出するためのスーパーポイント生成モジュールが導入され、疑似ラベル最適化モジュールが探索されて、の制約の下でラベルのないポイントに疑似ラベルが自動的に割り当てられます。抽出されたスーパーポイント。さらに、疑似ラベル監視のない3Dポイントがいくつかあります。エッジポイントの特徴を制約するためのエッジ予測モジュールを提案します。スーパーポイント機能をスムーズにするために、スーパーポイント機能集約モジュールとスーパーポイント機能の一貫性損失関数が導入されています。 2つの3D公開データセットに関する広範な実験結果は、私たちの方法が、いくつかの最先端の点群セグメンテーションネットワークやラベル付けされたシーンがほとんどないいくつかの一般的な半教師ありセグメンテーション方法よりも優れたパフォーマンスを達成できることを示しています。
3D point cloud semantic segmentation is a challenging topic in the computer vision field. Most of the existing methods in literature require a large amount of fully labeled training data, but it is extremely time-consuming to obtain these training data by manually labeling massive point clouds. Addressing this problem, we propose a superpoint-guided semi-supervised segmentation network for 3D point clouds, which jointly utilizes a small portion of labeled scene point clouds and a large number of unlabeled point clouds for network training. The proposed network is iteratively updated with its predicted pseudo labels, where a superpoint generation module is introduced for extracting superpoints from 3D point clouds, and a pseudo-label optimization module is explored for automatically assigning pseudo labels to the unlabeled points under the constraint of the extracted superpoints. Additionally, there are some 3D points without pseudo-label supervision. We propose an edge prediction module to constrain features of edge points. A superpoint feature aggregation module and a superpoint feature consistency loss function are introduced to smooth superpoint features. Extensive experimental results on two 3D public datasets demonstrate that our method can achieve better performance than several state-of-the-art point cloud segmentation networks and several popular semi-supervised segmentation methods with few labeled scenes.
updated: Thu Sep 09 2021 11:18:18 GMT+0000 (UTC)
published: Thu Jul 08 2021 04:43:21 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト