arXiv reaDer
弱く監視された点群セグメンテーションのための二重適応変換
Dual Adaptive Transformations for Weakly Supervised Point Cloud Segmentation
モデルトレーニングのために大量の密な注釈を収集する負担が大きいため、弱く監視された点群のセグメンテーション、つまり3Dシーン全体でラベル付けされたポイントが数個しかない点群を意味的にセグメント化することが非常に望ましいです。ただし、注釈付きデータが限られていると、ラベルなしデータへのラベル伝播のガイダンスが不十分になる可能性があるため、既存の方法では3D点群を正確にセグメント化することが依然として困難です。滑らかさベースの方法が有望な進歩を達成したことを考慮して、この論文では、ラベルのない3Dポイントを効果的に正規化するために、さまざまな摂動の下で一貫性制約を適用することを提唱します。具体的には、弱く監視された点群セグメンテーションのための新しいDAT(Dual Adaptive Transformations)モデルを提案します。このモデルでは、ローカルおよび構造の滑らかさの制約を適用することを目的として、ポイントレベルとリージョンレベルの両方で敵対的な戦略を介してデュアルアダプティブ変換が実行されます。 3D点群。大規模なS3DISおよびScanNet-V2データセットで2つの一般的なバックボーンを使用して提案されたDATモデルを評価します。広範な実験により、私たちのモデルがラベルのない3Dポイントを効果的に活用し、両方のデータセットで大幅なパフォーマンスの向上を実現し、弱く監視されたポイントクラウドセグメンテーションに新しい最先端のパフォーマンスを設定できることが実証されています。
Weakly supervised point cloud segmentation, i.e. semantically segmenting a point cloud with only a few labeled points in the whole 3D scene, is highly desirable due to the heavy burden of collecting abundant dense annotations for the model training. However, existing methods remain challenging to accurately segment 3D point clouds since limited annotated data may lead to insufficient guidance for label propagation to unlabeled data. Considering the smoothness-based methods have achieved promising progress, in this paper, we advocate applying the consistency constraint under various perturbations to effectively regularize unlabeled 3D points. Specifically, we propose a novel DAT (Dual Adaptive Transformations) model for weakly supervised point cloud segmentation, where the dual adaptive transformations are performed via an adversarial strategy at both point-level and region-level, aiming at enforcing the local and structural smoothness constraints on 3D point clouds. We evaluate our proposed DAT model with two popular backbones on the large-scale S3DIS and ScanNet-V2 datasets. Extensive experiments demonstrate that our model can effectively leverage the unlabeled 3D points and achieve significant performance gains on both datasets, setting new state-of-the-art performance for weakly supervised point cloud segmentation.
updated: Tue Jul 19 2022 05:43:14 GMT+0000 (UTC)
published: Tue Jul 19 2022 05:43:14 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト