arXiv reaDer
3Dポイントクラウドドメイン適応のための自己アンセムリング
Self-Ensemling for 3D Point Cloud Domain Adaption
最近、3Dポイントクラウド学習は、コンピュータービジョンと自動運転でホットな話題になっています。質の高い大規模な3D点群データセットに手動で注釈を付けることは難しいため、教師なしドメイン適応(UDA)は、学習した知識をラベル付きのソースドメインからラベルなしのターゲットに転送することを目的とした3D点群学習で人気があります。ドメイン。ただし、単純に学習されたモデルを使用したドメインシフトによって引き起こされる一般化と再構築のエラーは避けられず、モデルの機能が適切な表現を学習するのを実質的に妨げます。これらの問題に対処するために、3Dポイントクラウドドメイン適応タスク用のエンドツーエンドの自己アンサンブルネットワーク(SEN)を提案します。一般に、私たちのSENは、平均教師と半教師あり学習の利点に頼り、一貫した一般化と正確な再構築を達成することを目的として、ソフト分類損失と一貫性損失を導入します。 SENでは、学生ネットワークは教師あり学習および自己監視学習と協調して維持され、教師ネットワークは時間的一貫性を実行して有用な表現を学習し、点群の再構築の品質を保証します。いくつかの3DポイントクラウドUDAベンチマークでの広範な実験は、SENが分類タスクとセグメンテーションタスクの両方で最先端の方法よりも優れていることを示しています。さらに、さらなる分析は、私たちのSENがより良い再構成結果も達成することを示しています。
Recently 3D point cloud learning has been a hot topic in computer vision and autonomous driving. Due to the fact that it is difficult to manually annotate a qualitative large-scale 3D point cloud dataset, unsupervised domain adaptation (UDA) is popular in 3D point cloud learning which aims to transfer the learned knowledge from the labeled source domain to the unlabeled target domain. However, the generalization and reconstruction errors caused by domain shift with simply-learned model are inevitable which substantially hinder the model's capability from learning good representations. To address these issues, we propose an end-to-end self-ensembling network (SEN) for 3D point cloud domain adaption tasks. Generally, our SEN resorts to the advantages of Mean Teacher and semi-supervised learning, and introduces a soft classification loss and a consistency loss, aiming to achieve consistent generalization and accurate reconstruction. In SEN, a student network is kept in a collaborative manner with supervised learning and self-supervised learning, and a teacher network conducts temporal consistency to learn useful representations and ensure the quality of point clouds reconstruction. Extensive experiments on several 3D point cloud UDA benchmarks show that our SEN outperforms the state-of-the-art methods on both classification and segmentation tasks. Moreover, further analysis demonstrates that our SEN also achieves better reconstruction results.
updated: Sat Mar 25 2023 03:19:53 GMT+0000 (UTC)
published: Fri Dec 10 2021 02:18:09 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト