ソースフリードメイン適応(SFDA)は、適応中にソースドメインデータにアクセスすることなく、ソースドメインのラベル付きデータでトレーニングされたモデルをターゲットドメインのラベルなしデータに適応させることを目的としています。 SFDAの既存の方法は、次のようなエントロピー最小化手法を活用します。(i)分類にのみ適用されます。 (ii)モデルのキャリブレーションを破棄します。 (iii)ソースモデルに依存して、ターゲットドメインで適切なレベルの機能空間クラス分離を実現します。これらの問題は、測定システムの変更(センサーや照明の変更など)を特徴とする、測定シフトと呼ばれる特に普及しているタイプのドメインシフトについて対処します。ソースドメインでは、ソースデータの下に特徴分布の軽量で柔軟な近似を保存します。ターゲットドメインでは、ターゲットデータの下での近似的な特徴分布がソースに保存されているものと再調整されるように、特徴抽出器を適応させます。以前にソースから抽出されたものと同じセマンティクスを持つ特徴をターゲットドメインから抽出しようとするため、このメソッドを特徴復元(FR)と呼びます。さらに、ネットワークの後の層で学習した構造を保持することによってパフォーマンスを向上させる、FRのボトムアップトレーニングスキームであるボトムアップ機能復元(BUFR)を提案します。実験を通じて、BUFRは、ターゲットドメインのソースモデルのパフォーマンスへの依存度が低く、精度、キャリブレーション、およびデータ効率の点で既存のSFDAメソッドよりも優れていることが多いことを示しています。
Source-free domain adaptation (SFDA) aims to adapt a model trained on labelled data in a source domain to unlabelled data in a target domain without access to the source-domain data during adaptation. Existing methods for SFDA leverage entropy-minimization techniques which: (i) apply only to classification; (ii) destroy model calibration; and (iii) rely on the source model achieving a good level of feature-space class-separation in the target domain. We address these issues for a particularly pervasive type of domain shift called measurement shift, characterized by a change in measurement system (e.g. a change in sensor or lighting). In the source domain, we store a lightweight and flexible approximation of the feature distribution under the source data. In the target domain, we adapt the feature-extractor such that the approximate feature distribution under the target data realigns with that saved on the source. We call this method Feature Restoration (FR) as it seeks to extract features with the same semantics from the target domain as were previously extracted from the source. We additionally propose Bottom-Up Feature Restoration (BUFR), a bottom-up training scheme for FR which boosts performance by preserving learnt structure in the later layers of a network. Through experiments we demonstrate that BUFR often outperforms existing SFDA methods in terms of accuracy, calibration, and data efficiency, while being less reliant on the performance of the source model in the target domain.