arXiv reaDer
COLA:スパースLiDARデータセットの3Dセマンティックセグメンテーションのための粗いLAbel事前トレーニング
COLA: COarse LAbel pre-training for 3D semantic segmentation of sparse LiDAR datasets
転送学習は、2Dコンピュータービジョンで実証済みの手法であり、利用可能な大量のデータを活用し、取得または注釈のコストのためにサイズが制限されたデータセットで高いパフォーマンスを実現します。 3Dでは、注釈はコストのかかる作業であることが知られています。それにもかかわらず、転移学習法は最近調査されたばかりです。非常に大きな注釈付きデータセットが利用できないため、教師なし事前トレーニングが非常に好まれています。この作業では、スパース屋外LiDARスキャンのリアルタイム3Dセマンティックセグメンテーションのケースに取り組みます。このようなデータセットは増加していますが、同じタスクでも異なるラベルセットが使用されています。この作業では、粗いラベルと呼ばれる中間レベルのラベルセットを提案します。これにより、手動でラベルを付けることなく、使用可能なすべてのデータを活用できます。このようにして、セマンティックセグメンテーションのより単純なタスクとともに、より大きなデータセットにアクセスできます。これを使用して、新しい事前トレーニングタスクを紹介します。COLAとも呼ばれる粗いラベルの事前トレーニングです。さまざまなデータセットとアーキテクチャに対するCOLAの影響を徹底的に分析し、特に微調整タスクが小さなデータセットにしかアクセスできない場合に、パフォーマンスが大幅に向上することを示しています。
Transfer learning is a proven technique in 2D computer vision to leverage the large amount of data available and achieve high performance with datasets limited in size due to the cost of acquisition or annotation. In 3D, annotation is known to be a costly task; nevertheless, transfer learning methods have only recently been investigated. Unsupervised pre-training has been heavily favored as no very large annotated dataset are available. In this work, we tackle the case of real-time 3D semantic segmentation of sparse outdoor LiDAR scans. Such datasets have been on the rise, but with different label sets even for the same task. In this work, we propose here an intermediate-level label set called the coarse labels, which allows all the data available to be leveraged without any manual labelization. This way, we have access to a larger dataset, alongside a simpler task of semantic segmentation. With it, we introduce a new pre-training task: the coarse label pre-training, also called COLA. We thoroughly analyze the impact of COLA on various datasets and architectures and show that it yields a noticeable performance improvement, especially when the finetuning task has access only to a small dataset.
updated: Mon Feb 14 2022 17:19:23 GMT+0000 (UTC)
published: Mon Feb 14 2022 17:19:23 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト