arXiv reaDer
ドメインシフトのための事前トレーニングされたネットワークのいくつかのショットの適応
Few-Shot Adaptation of Pre-Trained Networks for Domain Shift
ソース(トレーニング)データとターゲット(テスト)データの間にドメインシフトがある場合、ディープネットワークはパフォーマンスが低下する傾向があります。最近のテスト時間適応方法は、新しいターゲット環境にデプロイされた事前トレーニング済みソースモデルのバッチ正規化レイヤーをストリーミングデータで更新して、このようなパフォーマンスの低下を軽減します。このような方法は、最初に大きなターゲットドメインデータセットを収集しなくてもオンザフライで適応できますが、そのパフォーマンスは、ミニバッチサイズやクラス分散などのストリーミング条件に依存します。これは実際には予測できない場合があります。この作業では、データ効率の高い適応の実際的な課題に対処するために、数ショットのドメイン適応のフレームワークを提案します。具体的には、ターゲットドメインからの小さなサポートセットによって監視される事前トレーニングされたソースモデルでの機能正規化統計の制約付き最適化を提案します。私たちの方法は実装が簡単で、分類タスクのクラスごとにわずか1つのサンプルでソースモデルのパフォーマンスを向上させます。 5つのクロスドメイン分類と4つのセマンティックセグメンテーションデータセットに関する広範な実験は、ストリーミング条件に制約されることなく、私たちの方法がテスト時間の適応よりも正確で信頼性の高いパフォーマンスを達成することを示しています。
Deep networks are prone to performance degradation when there is a domain shift between the source (training) data and target (test) data. Recent test-time adaptation methods update batch normalization layers of pre-trained source models deployed in new target environments with streaming data to mitigate such performance degradation. Although such methods can adapt on-the-fly without first collecting a large target domain dataset, their performance is dependent on streaming conditions such as mini-batch size and class-distribution, which can be unpredictable in practice. In this work, we propose a framework for few-shot domain adaptation to address the practical challenges of data-efficient adaptation. Specifically, we propose a constrained optimization of feature normalization statistics in pre-trained source models supervised by a small support set from the target domain. Our method is easy to implement and improves source model performance with as few as one sample per class for classification tasks. Extensive experiments on 5 cross-domain classification and 4 semantic segmentation datasets show that our method achieves more accurate and reliable performance than test-time adaptation, while not being constrained by streaming conditions.
updated: Sat Oct 22 2022 04:27:59 GMT+0000 (UTC)
published: Mon May 30 2022 16:49:59 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト