arXiv reaDer
Dense Supervision Propagation for Weakly Supervised Semantic Segmentation on 3D Point Clouds
3D点群でのセマンティックセグメンテーションは、3Dシーンを理解するための重要なタスクです。 3Dデータの高密度ラベリングは費用と時間がかかりますが、より単純で安価なラベルから学習することでラベリングコストを軽減するために、弱く監視されたセマンティックポイントクラウドセグメンテーション方法に対処する作業はごくわずかです。一方、既存の弱く監視された方法と最新の完全に監視された方法の間には、依然として大きなパフォーマンスのギャップがあります。この論文では、ポイントのごく一部のみがラベル付けされたセマンティックポイントクラウドセグメンテーションネットワークをトレーニングします。ラベル付けされたポイントから入力サンプル内および入力サンプル全体の他のポイントに監視信号を密に伝播するため、限られた監視情報をより有効に活用できると主張します。具体的には、類似の特徴を転送するためのクロスサンプル特徴再割り当てモジュールを提案し、したがって、共通のクラスを持つ2つのサンプル間で勾配を再ルーティングし、サンプル内特徴再分配モジュールを提案して、点群サンプル全体および内部のラベルのないポイントで監視信号を伝播します。公開データセットS3DISとScanNetで広範な実験を行っています。ラベルが10%と1%しかない弱教師ありの方法では、完全に教師ありの方法と互換性のある結果を生成できます。
Semantic segmentation on 3D point clouds is an important task for 3D scene understanding. While dense labeling on 3D data is expensive and time-consuming, only a few works address weakly supervised semantic point cloud segmentation methods to relieve the labeling cost by learning from simpler and cheaper labels. Meanwhile, there are still huge performance gaps between existing weakly supervised methods and state-of-the-art fully supervised methods. In this paper, we train a semantic point cloud segmentation network with only a small portion of points being labeled. We argue that we can better utilize the limited supervision information as we densely propagate the supervision signal from the labeled points to other points within and across the input samples. Specifically, we propose a cross-sample feature reallocating module to transfer similar features and therefore re-route the gradients across two samples with common classes and an intra-sample feature redistribution module to propagate supervision signals on unlabeled points across and within point cloud samples. We conduct extensive experiments on public datasets S3DIS and ScanNet. Our weakly supervised method with only 10% and 1% of labels can produce compatible results with the fully supervised counterpart.
updated: Mon Apr 01 2024 08:28:33 GMT+0000 (UTC)
published: Fri Jul 23 2021 14:34:57 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト