arXiv reaDer
一般化可能なソースフリーのドメイン適応のための一貫性正則化
Consistency Regularization for Generalizable Source-free Domain Adaptation
ソースフリー ドメイン アダプテーション (SFDA) は、ソース データセットにアクセスせずに、十分にトレーニングされたソース モデルをラベルのないターゲット ドメインに適応させ、現実世界のさまざまなシナリオに適用できるようにすることを目的としています。既存の SFDA メソッドは、ターゲットのトレーニング セット上で適応されたモデルのみを評価し、目に見えないが同一に分散されたテスト セットからのデータを無視します。この見落としは、過剰適合の問題を引き起こし、モデルの汎化能力を制約します。この論文では、ターゲットのトレーニング データセットとテスト データセットの両方でモデルのパフォーマンスを同時に向上させる、より一般化可能な SFDA 手法を開発するための一貫性正則化フレームワークを提案します。私たちの方法は、弱く拡張された画像から生成されたソフト擬似ラベルを活用して、強く拡張された画像を監視し、モデルのトレーニングプロセスを促進し、適応されたモデルの一般化能力を強化します。より潜在的に有用な監視を活用するために、より厳しいドメインシフトを持つサンプルを考慮した、サンプリングベースの擬似ラベル選択戦略を提案します。さらに、グローバル指向のキャリブレーション手法が導入され、グローバルなクラス分布と特徴クラスター情報が活用され、適応プロセスがさらに改善されます。広範な実験により、私たちの手法がいくつかの SFDA ベンチマークで最先端のパフォーマンスを達成し、未確認のテスト データセットで堅牢性を示すことが実証されました。
Source-free domain adaptation (SFDA) aims to adapt a well-trained source model to an unlabelled target domain without accessing the source dataset, making it applicable in a variety of real-world scenarios. Existing SFDA methods ONLY assess their adapted models on the target training set, neglecting the data from unseen but identically distributed testing sets. This oversight leads to overfitting issues and constrains the model's generalization ability. In this paper, we propose a consistency regularization framework to develop a more generalizable SFDA method, which simultaneously boosts model performance on both target training and testing datasets. Our method leverages soft pseudo-labels generated from weakly augmented images to supervise strongly augmented images, facilitating the model training process and enhancing the generalization ability of the adapted model. To leverage more potentially useful supervision, we present a sampling-based pseudo-label selection strategy, taking samples with severer domain shift into consideration. Moreover, global-oriented calibration methods are introduced to exploit global class distribution and feature cluster information, further improving the adaptation process. Extensive experiments demonstrate our method achieves state-of-the-art performance on several SFDA benchmarks, and exhibits robustness on unseen testing datasets.
updated: Thu Aug 03 2023 07:45:53 GMT+0000 (UTC)
published: Thu Aug 03 2023 07:45:53 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト