arXiv reaDer
クロスドメインセマンティックセグメンテーションのための不確実性を意識した一貫性の正則化
Uncertainty-Aware Consistency Regularization for Cross-Domain Semantic Segmentation
教師なしドメイン適応(UDA)は、ソースドメインの既存のモデルを、ラベルのないデータのみを使用して新しいターゲットドメインに適応させることを目的としています。多くの敵対者ベースのUDA手法は、不安定性の高いトレーニングを伴い、最適化手順を注意深く調整する必要があります。一部の非敵対的なUDAメソッドは、異なる摂動下での学生モデルと教師モデルのターゲット予測に一貫性の正則化を採用します。教師は同じアーキテクチャを学生と共有し、学生の指数移動平均によって更新されます。ただし、これらの方法は、エラーが発生しやすいディスクリミネーターネットワークまたは不合理な教師モデルのいずれかから生じる顕著な負の転送に悩まされています。この論文では、クロスドメインセマンティックセグメンテーションのための不確実性を意識した整合性正則化法を提案します。ターゲットサンプルの潜在的な不確実性情報を活用することにより、教師モデルからのより意味のある信頼できる知識を学生モデルに転送できます。さらに、分布の不一致を最小限に抑えるために、現在の整合性の正則化が不安定になることが多い理由をさらに明らかにします。また、一貫性損失の動的な重み付けスキームを使用して最も信頼性が高く意味のあるサンプルをマイニングすることにより、この方法がこの問題を効果的に緩和できることも示します。実験は、提案された方法が2つのドメイン適応ベンチマーク、すなわちGTAV→CityscapesとSYNTHIA→Cityscapesで最先端の方法よりも優れていることを示しています。
Unsupervised domain adaptation (UDA) aims to adapt existing models of the source domain to a new target domain with only unlabeled data. Many adversarial-based UDA methods involve high-instability training and have to carefully tune the optimization procedure. Some non-adversarial UDA methods employ a consistency regularization on the target predictions of a student model and a teacher model under different perturbations, where the teacher shares the same architecture with the student and is updated by the exponential moving average of the student. However, these methods suffer from noticeable negative transfer resulting from either the error-prone discriminator network or the unreasonable teacher model. In this paper, we propose an uncertainty-aware consistency regularization method for cross-domain semantic segmentation. By exploiting the latent uncertainty information of the target samples, more meaningful and reliable knowledge from the teacher model can be transferred to the student model. In addition, we further reveal the reason why the current consistency regularization is often unstable in minimizing the distribution discrepancy. We also show that our method can effectively ease this issue by mining the most reliable and meaningful samples with a dynamic weighting scheme of consistency loss. Experiments demonstrate that the proposed method outperforms the state-of-the-art methods on two domain adaptation benchmarks, i.e., GTAV → Cityscapes and SYNTHIA → Cityscapes.
updated: Thu Jan 07 2021 09:25:09 GMT+0000 (UTC)
published: Sun Apr 19 2020 15:30:26 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト