arXiv reaDer
GeT: ドメイン適応のための生成ターゲット構造のバイアス除去
GeT: Generative Target Structure Debiasing for Domain Adaptation
ドメイン適応 (DA) は、ドメイン シフトの下で、完全にラベル付けされたソースから、ほとんどラベル付けされていない、または完全にラベル付けされていないターゲットに知識を伝達することを目的としています。最近、疑似ラベル付けを利用する半教師あり学習ベース (SSL) 技術が DA で使用されることが増えています。これらの疑似ラベル付け方法は、競争力のあるパフォーマンスにもかかわらず、ターゲット ドメインの疑似ラベルを生成するソース ドメインに大きく依存しているため、依然としてソース データのバイアスにかなり悩まされています。さらに、ターゲット ドメイン内のクラス分布の偏りも、擬似ラベルの生成では無視されることが多く、そのためパフォーマンスがさらに低下することになります。本稿では、高品質の擬似ラベルを使用してバイアスのないターゲット埋め込み分布を学習する GeT を提案します。具体的には、オンラインターゲット生成分類器を定式化して、クラス事前分布によって重み付けされた独特のガウス成分にターゲット分布を誘導し、ソースデータのバイアスを軽減し、ターゲットクラスの識別性を強化します。さらに、ターゲットクラスの分布バイアスを軽減し、ターゲットクラスの識別性をさらに向上させるための構造類似性正則化フレームワークを提案します。実験結果は、私たちが提案した GeT が効果的であり、クラス分布バイアスの有無にかかわらず、さまざまな DA 設定の下で一貫した改善を達成することを示しています。私たちのコードは https://lulusindazc.github.io/getproject/ で入手できます。
Domain adaptation (DA) aims to transfer knowledge from a fully labeled source to a scarcely labeled or totally unlabeled target under domain shift. Recently, semi-supervised learning-based (SSL) techniques that leverage pseudo labeling have been increasingly used in DA. Despite the competitive performance, these pseudo labeling methods rely heavily on the source domain to generate pseudo labels for the target domain and therefore still suffer considerably from source data bias. Moreover, class distribution bias in the target domain is also often ignored in the pseudo label generation and thus leading to further deterioration of performance. In this paper, we propose GeT that learns a non-bias target embedding distribution with high quality pseudo labels. Specifically, we formulate an online target generative classifier to induce the target distribution into distinctive Gaussian components weighted by their class priors to mitigate source data bias and enhance target class discriminability. We further propose a structure similarity regularization framework to alleviate target class distribution bias and further improve target class discriminability. Experimental results show that our proposed GeT is effective and achieves consistent improvements under various DA settings with and without class distribution bias. Our code is available at: https://lulusindazc.github.io/getproject/.
updated: Sun Aug 20 2023 08:52:43 GMT+0000 (UTC)
published: Sun Aug 20 2023 08:52:43 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト