3D 点群上のインスタンス セグメンテーションは、その幅広い用途、特にシーン理解分野での応用によりますます注目を集めています。ただし、既存の方法のほとんどは、完全に注釈が付けられたデータを操作しますが、ポイントレベルでグラウンドトゥルースラベルを手動で準備するのは非常に面倒で労力がかかります。この問題に対処するために、1 つのオブジェクトに 1 つの点でラベルを付けるだけで済む、新しい弱教師メソッド RWSeg を提案します。これらのまばらな弱いラベルを使用して、自己注意とクロスグラフ ランダム ウォーク法を使用して、意味論情報とインスタンス情報をそれぞれ未知の領域に伝播する 2 つのブランチを持つ統合フレームワークを導入します。具体的には、異なるインスタンス グラフ間の競合を促進して、密接に配置されたオブジェクトのあいまいさを解決し、インスタンス割り当ての精度を向上させるクロスグラフ競合ランダム ウォーク (CRW) アルゴリズムを提案します。 RWSeg は、高品質のインスタンス レベルの疑似ラベルを生成します。 ScanNet-v2 および S3DIS データセットの実験結果は、私たちのアプローチが完全に教師ありの手法で同等のパフォーマンスを達成し、以前の弱く教師ありの手法を大幅に上回るパフォーマンスを示していることを示しています。
Instance segmentation on 3D point clouds has been attracting increasing attention due to its wide applications, especially in scene understanding areas. However, most existing methods operate on fully annotated data while manually preparing ground-truth labels at point-level is very cumbersome and labor-intensive. To address this issue, we propose a novel weakly supervised method RWSeg that only requires labeling one object with one point. With these sparse weak labels, we introduce a unified framework with two branches to propagate semantic and instance information respectively to unknown regions using self-attention and a cross-graph random walk method. Specifically, we propose a Cross-graph Competing Random Walks (CRW) algorithm that encourages competition among different instance graphs to resolve ambiguities in closely placed objects, improving instance assignment accuracy. RWSeg generates high-quality instance-level pseudo labels. Experimental results on ScanNet-v2 and S3DIS datasets show that our approach achieves comparable performance with fully-supervised methods and outperforms previous weakly-supervised methods by a substantial margin.