arXiv reaDer
3Dポイントクラウドセマンティックセグメンテーションのための新しいクラス発見
Novel Class Discovery for 3D Point Cloud Semantic Segmentation
セマンティック セグメンテーションの新規クラス発見 (NCD) は、ラベル付き (基本) クラスからの監督のみを使用して、ラベルなし (新規) クラスをセグメント化できるモデルを学習するタスクです。この問題は、最近 2D 画像データで開拓されましたが、3D 点群データについては研究が行われていません。実際、この場合、2D で行われた仮定は 3D にも大まかに適用できます。この論文は、点群データ解析の最新技術を 4 つの方向に進めるために提示されています。まず、点群セマンティック セグメンテーションの NCD の新しい問題に対処します。第二に、2D セマンティック セグメンテーションのための唯一の既存の NCD メソッドを 3D データに転置することは最適ではないことを示します。第三に、オンライン クラスタリングに基づく NCD の新しい方法を提示します。これは、不確実性の定量化を利用して、新しいクラスのポイントを疑似ラベル付けするためのプロトタイプを作成します。最後に、点群セマンティック セグメンテーションの NCD のパフォーマンスを評価するための新しい評価プロトコルを紹介します。 SemanticKITTI および SemanticPOSS データセットでメソッドを徹底的に評価し、ベースラインを大幅に上回ることができることを示しています。このリンクのプロジェクト ページ: https://github.com/LuigiRiz/NOPS。
Novel class discovery (NCD) for semantic segmentation is the task of learning a model that can segment unlabelled (novel) classes using only the supervision from labelled (base) classes. This problem has recently been pioneered for 2D image data, but no work exists for 3D point cloud data. In fact, the assumptions made for 2D are loosely applicable to 3D in this case. This paper is presented to advance the state of the art on point cloud data analysis in four directions. Firstly, we address the new problem of NCD for point cloud semantic segmentation. Secondly, we show that the transposition of the only existing NCD method for 2D semantic segmentation to 3D data is suboptimal. Thirdly, we present a new method for NCD based on online clustering that exploits uncertainty quantification to produce prototypes for pseudo-labelling the points of the novel classes. Lastly, we introduce a new evaluation protocol to assess the performance of NCD for point cloud semantic segmentation. We thoroughly evaluate our method on SemanticKITTI and SemanticPOSS datasets, showing that it can significantly outperform the baseline. Project page at this link: https://github.com/LuigiRiz/NOPS.
updated: Tue Mar 21 2023 06:10:39 GMT+0000 (UTC)
published: Tue Mar 21 2023 06:10:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト