arXiv reaDer
ドメインアラインメントは完全にテスト時間の適応に適合
Domain Alignment Meets Fully Test-Time Adaptation
デプロイされたMLモデルの基本的な要件は、トレーニングとは異なるテストディストリビューションから抽出されたデータに一般化することです。この問題の一般的な解決策は、ラベルのないデータのみを使用して、事前にトレーニングされたモデルを新しいドメインに適合させることです。このホワイトペーパーでは、元のソースデータへのアクセスが制限されているこの問題の挑戦的な変形に焦点を当てます。完全なテスト時間適応(FTTA)と教師なしドメイン適応(UDA)は密接に関連していますが、ほとんどのUDAメソッドはソースデータへのアクセスを必要とするため、UDAの進歩はTTAに容易に適用できません。したがって、新しい深部部分空間アライメント戦略を通じて、ソースデータ全体にアクセスする必要性を緩和することにより、UDAとFTTAを橋渡しする新しいアプローチCATTAnを提案します。 CATTAnは、ソースデータの部分空間基底関数系を格納するオーバーヘッドを最小限に抑え、適応中にソースデータとターゲットデータ間の教師なしアライメントを可能にします。複数の2Dおよび3Dビジョンベンチマーク(ImageNet-C、Office-31、OfficeHome、DomainNet、PointDA-10)およびモデルアーキテクチャに関する広範な実験的評価を通じて、FTTAパフォーマンスの大幅な向上を実証します。さらに、本質的に堅牢なモデル、事前にトレーニングされたViT表現、およびターゲットドメインでのサンプルの可用性が低い場合でも、アライメント目標の有用性について多くの重要な発見を行います。
A foundational requirement of a deployed ML model is to generalize to data drawn from a testing distribution that is different from training. A popular solution to this problem is to adapt a pre-trained model to novel domains using only unlabeled data. In this paper, we focus on a challenging variant of this problem, where access to the original source data is restricted. While fully test-time adaptation (FTTA) and unsupervised domain adaptation (UDA) are closely related, the advances in UDA are not readily applicable to TTA, since most UDA methods require access to the source data. Hence, we propose a new approach, CATTAn, that bridges UDA and FTTA, by relaxing the need to access entire source data, through a novel deep subspace alignment strategy. With a minimal overhead of storing the subspace basis set for the source data, CATTAn enables unsupervised alignment between source and target data during adaptation. Through extensive experimental evaluation on multiple 2D and 3D vision benchmarks (ImageNet-C, Office-31, OfficeHome, DomainNet, PointDA-10) and model architectures, we demonstrate significant gains in FTTA performance. Furthermore, we make a number of crucial findings on the utility of the alignment objective even with inherently robust models, pre-trained ViT representations and under low sample availability in the target domain.
updated: Sat Jul 09 2022 03:17:19 GMT+0000 (UTC)
published: Sat Jul 09 2022 03:17:19 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト