点群のセグメンテーションは、3Dの基本的なタスクです。ディープネットワークの力によるポイントクラウドセグメンテーションの最近の進歩にもかかわらず、クリーンラベルの仮定に基づく現在のディープラーニング方法は、ノイズの多いラベルでは失敗する可能性があります。それでも、オブジェクトクラスのラベルは、実際の点群データセットでは誤ってラベル付けされることがよくあります。この作業では、新しいポイントノイズアダプティブラーニング(PNAL)フレームワークを提案することにより、この問題の解決を主導します。画像タスクの既存のノイズロバストな方法と比較して、私たちのPNALは、点群に固有の空間的に変化するノイズレートの問題に対処するために、ノイズレートブラインドです。具体的には、各ポイントの履歴予測に基づいて信頼できるラベルを取得するために、新しいポイントごとの信頼性の選択を提案します。隣接点の相関を考慮に入れて可能な限り最良のラベルを生成するための投票戦略を使用して、新しいクラスター単位のラベル修正が提案されます。合成データセットと実世界のノイズの多いデータセットの両方でPNALの有効性を実証するために、広範な実験を実施します。特に、60%対称のノイズの多いラベルがある場合でも、提案された方法は、PNALを使用しないベースラインの対応する方法よりもはるかに優れた結果を生成し、完全にクリーンなデータセットでトレーニングされた理想的な上限に匹敵します。さらに、厳密な実験と将来の研究のために、人気がありながらノイズの多い実世界のシーンデータセットScanNetV2のテストセットに完全にラベルを付け直して、クリーンにしました。私たちのコードとデータはhttps://shuquanye.com/PNAL_website/で入手できます。
Point cloud segmentation is a fundamental task in 3D. Despite recent progress on point cloud segmentation with the power of deep networks, current deep learning methods based on the clean label assumptions may fail with noisy labels. Yet, object class labels are often mislabeled in real-world point cloud datasets. In this work, we take the lead in solving this issue by proposing a novel Point Noise-Adaptive Learning (PNAL) framework. Compared to existing noise-robust methods on image tasks, our PNAL is noise-rate blind, to cope with the spatially variant noise rate problem specific to point clouds. Specifically, we propose a novel point-wise confidence selection to obtain reliable labels based on the historical predictions of each point. A novel cluster-wise label correction is proposed with a voting strategy to generate the best possible label taking the neighbor point correlations into consideration. We conduct extensive experiments to demonstrate the effectiveness of PNAL on both synthetic and real-world noisy datasets. In particular, even with 60% symmetric noisy labels, our proposed method produces much better results than its baseline counterpart without PNAL and is comparable to the ideal upper bound trained on a completely clean dataset. Moreover, we fully re-labeled the test set of a popular but noisy real-world scene dataset ScanNetV2 to make it clean, for rigorous experiment and future research. Our code and data will be available at https://shuquanye.com/PNAL_website/.