自動運転車を安全に配備するには、車載認識システムがさまざまな環境や地域で高精度に確実に機能する必要があります。新しいドメインでこのようなシステムの有効性を向上させる最も一般的な手法の1つは、大きなラベル付きデータセットの収集ですが、特に新しい展開地域ごとに高価な3Dバウンディングボックスアノテーションを含む追加データが必要な場合、このようなデータセットの取得には非常にコストがかかる可能性があります。 3Dオブジェクト検出の疑似ラベリングは、より安価で広く利用可能なラベルなしデータを活用する効果的な方法であり、さまざまなアーキテクチャ、データ拡張戦略、およびラベル付きデータセットのサイズ全体でパフォーマンスの向上につながる可能性があることを示します。全体として、より良い教師モデルがより良い学生モデルにつながること、そして高価な教師を効率的で単純な学生に蒸留できることを示しています。具体的には、疑似ラベルでトレーニングされた学生モデルが、ラベル付けされた例の3〜10倍の量でトレーニングされた教師ありモデルよりも優れていることを示します。 2年前のアーキテクチャであるPointPillars [24]を学生モデルとして使用すると、大量の疑似ラベル付きデータを活用するだけで、最先端の精度を実現できます。最後に、これらの学生モデルは、教師ありモデルよりも、ラベルなしデータしかない新しいドメインに一般化することを示します。これにより、疑似ラベルトレーニングが教師なしドメイン適応の効果的な形式になります。
To safely deploy autonomous vehicles, onboard perception systems must work reliably at high accuracy across a diverse set of environments and geographies. One of the most common techniques to improve the efficacy of such systems in new domains involves collecting large labeled datasets, but such datasets can be extremely costly to obtain, especially if each new deployment geography requires additional data with expensive 3D bounding box annotations. We demonstrate that pseudo-labeling for 3D object detection is an effective way to exploit less expensive and more widely available unlabeled data, and can lead to performance gains across various architectures, data augmentation strategies, and sizes of the labeled dataset. Overall, we show that better teacher models lead to better student models, and that we can distill expensive teachers into efficient, simple students. Specifically, we demonstrate that pseudo-label-trained student models can outperform supervised models trained on 3-10 times the amount of labeled examples. Using PointPillars [24], a two-year-old architecture, as our student model, we are able to achieve state of the art accuracy simply by leveraging large quantities of pseudo-labeled data. Lastly, we show that these student models generalize better than supervised models to a new domain in which we only have unlabeled data, making pseudo-label training an effective form of unsupervised domain adaptation.