ソースフリードメイン適応(SFDA)は、適応中にソースドメインデータにアクセスすることなく、ソースドメインのラベル付きデータでトレーニングされたモデルをターゲットドメインのラベルなしデータに適応させることを目的としています。 SFDAの既存の方法は、次のようなエントロピー最小化手法を活用しています。(i)分類にのみ適用されます。 (ii)モデルのキャリブレーションを破棄します。 (iii)ソースモデルに依存して、ターゲットドメインで適切なレベルの機能空間クラス分離を実現します。これらの問題は、測定シフトと呼ばれる特に普及しているタイプのドメインシフトについて対処します。これは、新しい機能を抽出するのではなく、ソース機能を復元することで解決できます。特に、特徴復元(FR)を提案します。ここでは、次のことを行います。(i)ソースデータの下に特徴分布の軽量で柔軟な近似を保存します。 (ii)ターゲットデータの下での近似的な特徴分布がソースに保存されたものと再整列するように、特徴抽出器を適合させます。さらに、パフォーマンスを向上させるボトムアップトレーニングスキームを提案します。これをボトムアップ機能復元(BUFR)と呼びます。実際のデータと合成データでは、BUFRが、ターゲットドメインのソースモデルのパフォーマンスへの依存度が低く、精度、キャリブレーション、およびデータ効率の点で既存のSFDAメソッドよりも優れていることを示しています。
Source-free domain adaptation (SFDA) aims to adapt a model trained on labelled data in a source domain to unlabelled data in a target domain without access to the source-domain data during adaptation. Existing methods for SFDA leverage entropy-minimization techniques which: (i) apply only to classification; (ii) destroy model calibration; and (iii) rely on the source model achieving a good level of feature-space class-separation in the target domain. We address these issues for a particularly pervasive type of domain shift called measurement shift which can be resolved by restoring the source features rather than extracting new ones. In particular, we propose Feature Restoration (FR) wherein we: (i) store a lightweight and flexible approximation of the feature distribution under the source data; and (ii) adapt the feature-extractor such that the approximate feature distribution under the target data realigns with that saved on the source. We additionally propose a bottom-up training scheme which boosts performance, which we call Bottom-Up Feature Restoration (BUFR). On real and synthetic data, we demonstrate that BUFR outperforms existing SFDA methods in terms of accuracy, calibration, and data efficiency, while being less reliant on the performance of the source model in the target domain.