arXiv reaDer
ソースフリーの教師なしドメイン適応のための不確実性と自己トレーニングによる機能アライメント
Feature Alignment by Uncertainty and Self-Training for Source-Free Unsupervised Domain Adaptation
ほとんどの教師なしドメイン適応 (UDA) メソッドは、モデルの適応中にラベル付きソース画像が利用可能であることを前提としています。ただし、この仮定は、機密性の問題やモバイル デバイスのメモリの制約により、実行不可能なことがよくあります。最近開発されたアプローチの中には、適応中にソース イメージを必要としないものもありますが、摂動したイメージではパフォーマンスが制限されます。これらの問題に対処するために、事前トレーニング済みのソース モデルとラベル付けされていないターゲット イメージのみを使用する新しいソースフリー UDA メソッドを提案します。私たちの方法は、データ拡張を組み込むことによって偶然の不確実性をキャプチャし、2 つの一貫性のある目的で特徴ジェネレーターをトレーニングします。特徴ジェネレーターは、頭部分類子の決定境界から離れて一貫した視覚的特徴を学習することが推奨されます。したがって、適応モデルは、画像の摂動に対してよりロバストになります。自己教師あり学習に触発された私たちの方法は、ソース ドメインとターゲット ドメイン間のドメイン ギャップを減らすために、特徴空間内に空間内の一貫性を組み込みながら、予測空間と特徴空間の間の空間間の整合を促進します。また、モデル適応のパフォーマンスを向上させるために、認識の不確実性も考慮します。一般的な UDA ベンチマーク データセットでの広範な実験により、提案されたソースフリーの方法が標準の UDA 方法に匹敵するか、さらには優れていることが示されています。さらに、適応モデルは、入力画像が摂動されたときに、よりロバストな結果を示します。
Most unsupervised domain adaptation (UDA) methods assume that labeled source images are available during model adaptation. However, this assumption is often infeasible owing to confidentiality issues or memory constraints on mobile devices. Some recently developed approaches do not require source images during adaptation, but they show limited performance on perturbed images. To address these problems, we propose a novel source-free UDA method that uses only a pre-trained source model and unlabeled target images. Our method captures the aleatoric uncertainty by incorporating data augmentation and trains the feature generator with two consistency objectives. The feature generator is encouraged to learn consistent visual features away from the decision boundaries of the head classifier. Thus, the adapted model becomes more robust to image perturbations. Inspired by self-supervised learning, our method promotes inter-space alignment between the prediction space and the feature space while incorporating intra-space consistency within the feature space to reduce the domain gap between the source and target domains. We also consider epistemic uncertainty to boost the model adaptation performance. Extensive experiments on popular UDA benchmark datasets demonstrate that the proposed source-free method is comparable or even superior to vanilla UDA methods. Moreover, the adapted models show more robust results when input images are perturbed.
updated: Thu Mar 16 2023 11:48:19 GMT+0000 (UTC)
published: Wed Aug 31 2022 14:28:36 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト