arXiv reaDer
FAST3D:3Dオブジェクト検出器のフロー対応セルフトレーニング
FAST3D: Flow-Aware Self-Training for 3D Object Detectors
自動運転の分野では、LiDARベースの3Dオブジェクト検出器の分布シフトを軽減するためにセルフトレーニングが広く適用されています。これにより、環境(地理的な場所、センサーのセットアップ、気象条件など)が変化するたびに、高価で高品質のラベルが不要になります。ただし、最先端のセルフトレーニングアプローチでは、自動運転データの時間的性質はほとんど無視されます。この問題に対処するために、連続LiDARポイントクラウド上の3Dオブジェクト検出器の教師なしドメイン適応を可能にするフロー認識セルフトレーニング方法を提案します。信頼性の高い疑似ラベルを取得するために、シーンフローを活用して、時間の経過とともに検出を伝播します。特に、フローベースのマルチターゲットトラッカーを導入します。これは、フローの一貫性を利用して、結果のトラックをフィルタリングおよび調整します。出現した正確な疑似ラベルは、モデルの再トレーニングの基礎として機能します。事前にトレーニングされたKITTIモデルから始めて、挑戦的なWaymo Open Datasetで実験を行い、アプローチの有効性を実証します。事前のターゲットドメインの知識がなくても、私たちの結果は、最先端のものよりも大幅に改善されていることを示しています。
In the field of autonomous driving, self-training is widely applied to mitigate distribution shifts in LiDAR-based 3D object detectors. This eliminates the need for expensive, high-quality labels whenever the environment changes (e.g., geographic location, sensor setup, weather condition). State-of-the-art self-training approaches, however, mostly ignore the temporal nature of autonomous driving data. To address this issue, we propose a flow-aware self-training method that enables unsupervised domain adaptation for 3D object detectors on continuous LiDAR point clouds. In order to get reliable pseudo-labels, we leverage scene flow to propagate detections through time. In particular, we introduce a flow-based multi-target tracker, that exploits flow consistency to filter and refine resulting tracks. The emerged precise pseudo-labels then serve as a basis for model re-training. Starting with a pre-trained KITTI model, we conduct experiments on the challenging Waymo Open Dataset to demonstrate the effectiveness of our approach. Without any prior target domain knowledge, our results show a significant improvement over the state-of-the-art.
updated: Mon Oct 18 2021 14:32:05 GMT+0000 (UTC)
published: Mon Oct 18 2021 14:32:05 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト