arXiv reaDer
Generalized Source-free Domain Adaptation
ドメイン適応(DA)は、ソースドメインから学習した知識をラベルのないターゲットドメインに転送することを目的としています。最近のいくつかの研究は、ソースの事前トレーニングされたモデルのみがターゲットドメインへの適応に利用できるソースフリードメイン適応(SFDA)に取り組んでいます。ただし、これらの方法では、実際のアプリケーションで実用的な価値の高いソースパフォーマンスを維持することは考慮されていません。この論文では、一般化されたソースフリードメイン適応(G-SFDA)と呼ばれる新しいドメイン適応パラダイムを提案します。このパラダイムでは、学習されたモデルがターゲットドメインとソースドメインの両方で適切に機能し、適応中に現在のラベルのないターゲットデータにのみアクセスする必要があります。 。最初に、ローカル構造クラスタリング(LSC)を提案します。これは、ターゲットフィーチャを意味的に類似したネイバーでクラスター化することを目的としており、ソースデータがない場合にモデルをターゲットドメインに正常に適合させます。次に、スパースドメインアテンション(SDA)を提案します。これは、バイナリドメイン固有のアテンションを生成して、異なるドメインの異なる機能チャネルをアクティブにします。一方、ドメインアテンションは、ソース情報を保持するための適応中に勾配を正規化するために利用されます。実験では、ターゲットパフォーマンスについて、私たちの方法は既存のDAおよびSFDAの方法と同等かそれ以上であり、具体的にはVisDAで最先端のパフォーマンス(85.4%)を達成し、私たちの方法は適応後、すべてのドメインでうまく機能します単一または複数のターゲットドメインに。コードはで入手できます。
Domain adaptation (DA) aims to transfer the knowledge learned from a source domain to an unlabeled target domain. Some recent works tackle source-free domain adaptation (SFDA) where only a source pre-trained model is available for adaptation to the target domain. However, those methods do not consider keeping source performance which is of high practical value in real world applications. In this paper, we propose a new domain adaptation paradigm called Generalized Source-free Domain Adaptation (G-SFDA), where the learned model needs to perform well on both the target and source domains, with only access to current unlabeled target data during adaptation. First, we propose local structure clustering (LSC), aiming to cluster the target features with its semantically similar neighbors, which successfully adapts the model to the target domain in the absence of source data. Second, we propose sparse domain attention (SDA), it produces a binary domain specific attention to activate different feature channels for different domains, meanwhile the domain attention will be utilized to regularize the gradient during adaptation to keep source information. In the experiments, for target performance our method is on par with or better than existing DA and SFDA methods, specifically it achieves state-of-the-art performance (85.4%) on VisDA, and our method works well for all domains after adapting to single or multiple target domains. Code is available in
updated: Fri Oct 08 2021 12:48:47 GMT+0000 (UTC)
published: Tue Aug 03 2021 16:34:12 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト