arXiv reaDer
クロスドメインセマンティックセグメンテーションのための不確実性を意識した一貫性の正則化
Uncertainty-Aware Consistency Regularization for Cross-Domain Semantic Segmentation
教師なしドメイン適応(UDA)は、ソースドメインの既存のモデルを、ラベルのないデータのみを使用して新しいターゲットドメインに適応させることを目的としています。ほとんどの既存の方法は、エラーが発生しやすいディスクリミネーターネットワークまたは不合理な教師モデルのいずれかから生じる顕著な負の転送に悩まされています。さらに、UDAのローカルな地域の一貫性はほとんど無視されており、コンテキストの乱用のため、グローバルレベルのパターン情報を抽出するだけでは機能の調整に十分な力がありません。この目的のために、クロスドメインセマンティックセグメンテーションのための不確実性を意識した整合性正則化方法を提案します。まず、ターゲットサンプルの潜在的な不確実性情報を活用することにより、動的重み付けスキームを使用した不確実性に基づく整合性損失を導入します。そのため、教師モデルからのより有意義で信頼性の高い知識を学生モデルに移すことができます。さらに、ドメインの不一致を最小限に抑えるために、現在の整合性の正則化が不安定になることが多い理由を明らかにします。さらに、ClassDropマスク生成アルゴリズムを設計して、強力なクラスごとの摂動を生成します。このマスクに導かれて、効果的な地域の一貫性をきめ細かく実現するためのClassOut戦略を提案します。実験は、私たちの方法が4つのドメイン適応ベンチマーク、すなわちGTAV→都市の景観とSYNTHIA→都市の景観、仮想KITTI→KITTIと都市の景観→KITTIで最先端の方法よりも優れていることを示しています。
Unsupervised domain adaptation (UDA) aims to adapt existing models of the source domain to a new target domain with only unlabeled data. Most existing methods suffer from noticeable negative transfer resulting from either the error-prone discriminator network or the unreasonable teacher model. Besides, the local regional consistency in UDA has been largely neglected, and only extracting the global-level pattern information is not powerful enough for feature alignment due to the abuse use of contexts. To this end, we propose an uncertainty-aware consistency regularization method for cross-domain semantic segmentation. Firstly, we introduce an uncertainty-guided consistency loss with a dynamic weighting scheme by exploiting the latent uncertainty information of the target samples. As such, more meaningful and reliable knowledge from the teacher model can be transferred to the student model. We further reveal the reason why the current consistency regularization is often unstable in minimizing the domain discrepancy. Besides, we design a ClassDrop mask generation algorithm to produce strong class-wise perturbations. Guided by this mask, we propose a ClassOut strategy to realize effective regional consistency in a fine-grained manner. Experiments demonstrate that our method outperforms the state-of-the-art methods on four domain adaptation benchmarks, i.e., GTAV → Cityscapes and SYNTHIA → Cityscapes, Virtual KITTI → KITTI and Cityscapes → KITTI.
updated: Thu Aug 19 2021 06:57:22 GMT+0000 (UTC)
published: Sun Apr 19 2020 15:30:26 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト