arXiv reaDer
ソースフリー教師なしドメイン適応のための不確実性誘導転送可能性表現
Uncertainty-Induced Transferability Representation for Source-Free Unsupervised Domain Adaptation
ソースフリーの教師なしドメイン適応 (SFUDA) は、ラベル付けされていないターゲット データと十分にトレーニングされたソース ドメイン モデルの知識を使用して、ターゲット ドメイン モデルを学習することを目的としています。これまでの SFUDA のほとんどの作業は、ソースの知識に基づいてターゲット データのセマンティクスを推測することに重点を置いていました。ソース知識の伝達可能性を測定しないと、これらの方法はソース知識を十分に活用できず、推論されたターゲット セマンティクスの信頼性を特定できません。ただし、既存の転送可能性の測定にはソース データまたはターゲット ラベルのいずれかが必要であり、SFUDA では実行できません。この目的のために、まず、ソースデータとターゲットラベルがない場合にソースエンコーダのチャネルごとの転送可能性を分析するツールとして不確実性を活用する、新しい不確実性誘導転送可能性表現 (UTR) を提案します。ドメイン レベルの UTR は、エンコーダ チャネルがターゲット ドメインにどの程度転送可能かを明らかにし、インスタンス レベルの UTR は、推測されたターゲット セマンティクスの信頼性を特徴付けます。次に、UTR に基づいて、i) ターゲット モデルが転送可能なソース知識を学習し、転送不可能な知識を破棄するようにガイドするソース知識キャリブレーション モジュール、および ii) を含む SFUDA 用の新しいキャリブレーション済み適応フレームワーク (CAF) を提案します。信頼できないセマンティクスを調整するターゲット セマンティクス調整モジュール。調整されたソース知識とターゲット セマンティクスの助けを借りて、モデルはターゲット ドメインに安全に適応し、最終的にはより適切に適応します。実験結果を使用して提案手法の有効性を検証し、提案手法が 3 つの SFUDA ベンチマークで最先端のパフォーマンスを達成することを実証しました。コードは https://github.com/SPIresearch/UTR で入手できます。
Source-free unsupervised domain adaptation (SFUDA) aims to learn a target domain model using unlabeled target data and the knowledge of a well-trained source domain model. Most previous SFUDA works focus on inferring semantics of target data based on the source knowledge. Without measuring the transferability of the source knowledge, these methods insufficiently exploit the source knowledge, and fail to identify the reliability of the inferred target semantics. However, existing transferability measurements require either source data or target labels, which are infeasible in SFUDA. To this end, firstly, we propose a novel Uncertainty-induced Transferability Representation (UTR), which leverages uncertainty as the tool to analyse the channel-wise transferability of the source encoder in the absence of the source data and target labels. The domain-level UTR unravels how transferable the encoder channels are to the target domain and the instance-level UTR characterizes the reliability of the inferred target semantics. Secondly, based on the UTR, we propose a novel Calibrated Adaption Framework (CAF) for SFUDA, including i)the source knowledge calibration module that guides the target model to learn the transferable source knowledge and discard the non-transferable one, and ii)the target semantics calibration module that calibrates the unreliable semantics. With the help of the calibrated source knowledge and the target semantics, the model adapts to the target domain safely and ultimately better. We verified the effectiveness of our method using experimental results and demonstrated that the proposed method achieves state-of-the-art performances on the three SFUDA benchmarks. Code is available at https://github.com/SPIresearch/UTR.
updated: Tue Aug 30 2022 04:54:53 GMT+0000 (UTC)
published: Tue Aug 30 2022 04:54:53 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト