arXiv reaDer
GLENet: 生成ラベル不確実性推定による 3D オブジェクト検出器の強化
GLENet: Boosting 3D Object Detectors with Generative Label Uncertainty Estimation
3D バウンディング ボックスのグラウンド トゥルース アノテーションに固有のあいまいさは、オクルージョン、信号の欠落、または手動によるアノテーション エラーによって引き起こされ、トレーニング中にディープ 3D オブジェクト検出器を混乱させ、検出精度を低下させる可能性があります。ただし、既存の方法ではこのような問題はある程度無視され、ラベルは決定論的なものとして扱われます。この論文では、ラベルの不確実性の問題を、オブジェクトの潜在的にもっともらしい境界ボックスの多様性として定式化します。次に、条件変分オートエンコーダを応用した生成フレームワークである GLENet を提案し、典型的な 3D オブジェクトとその潜在的なグランドトゥルース境界ボックスと潜在変数との間の 1 対多の関係をモデル化します。 GLENet によって生成されたラベルの不確実性はプラグアンドプレイ モジュールであり、既存のディープ 3D 検出器に簡単に統合して、確率的検出器を構築し、位置特定の不確実性の学習を監視できます。さらに、予測された位置の不確実性を使用して IoU ブランチのトレーニングをガイドするために、確率検出器における不確実性を認識した品質推定器アーキテクチャを提案します。私たちは、提案された手法をさまざまな一般的なベース 3D 検出器に組み込み、KITTI と Waymo の両方のベンチマーク データセットで大幅かつ一貫したパフォーマンスの向上を実証しました。特に、提案された GLENet-VR は、公開されているすべての LiDAR ベースのアプローチを大幅に上回り、困難な KITTI テストセットにおけるシングルモーダル手法の中でトップランクを達成しています。ソース コードと事前トレーニングされたモデルは、 で公開されています。
The inherent ambiguity in ground-truth annotations of 3D bounding boxes, caused by occlusions, signal missing, or manual annotation errors, can confuse deep 3D object detectors during training, thus deteriorating detection accuracy. However, existing methods overlook such issues to some extent and treat the labels as deterministic. In this paper, we formulate the label uncertainty problem as the diversity of potentially plausible bounding boxes of objects. Then, we propose GLENet, a generative framework adapted from conditional variational autoencoders, to model the one-to-many relationship between a typical 3D object and its potential ground-truth bounding boxes with latent variables. The label uncertainty generated by GLENet is a plug-and-play module and can be conveniently integrated into existing deep 3D detectors to build probabilistic detectors and supervise the learning of the localization uncertainty. Besides, we propose an uncertainty-aware quality estimator architecture in probabilistic detectors to guide the training of the IoU-branch with predicted localization uncertainty. We incorporate the proposed methods into various popular base 3D detectors and demonstrate significant and consistent performance gains on both KITTI and Waymo benchmark datasets. Especially, the proposed GLENet-VR outperforms all published LiDAR-based approaches by a large margin and achieves the top rank among single-modal methods on the challenging KITTI test set. The source code and pre-trained models are publicly available at
updated: Mon Jul 08 2024 06:03:19 GMT+0000 (UTC)
published: Wed Jul 06 2022 06:26:17 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト