arXiv reaDer
画像変換を伴うソース無料ドメイン適応
Source Free Domain Adaptation with Image Translation
大規模なデータセットをリリースする際の努力は、プライバシーと知的財産の考慮によって損なわれる可能性があります。実行可能な代替策は、代わりに事前トレーニング済みモデルをリリースすることです。これらのモデルは元のタスク(ソースドメイン)に優れていますが、新しい環境(ターゲットドメイン)に直接デプロイするとパフォーマンスが大幅に低下する可能性があり、現実的な設定でのトレーニング用のラベルが含まれていない場合があります。ドメインアダプテーション(DA)はドメインギャップの問題に対する既知の解決策ですが、通常はラベル付きのソースデータが必要です。このホワイトペーパーでは、ソースドメインが事前トレーニング済みのモデルのみを提供し、ソースデータは提供しないという特徴を特徴とするソースフリードメイン適応(SFDA)の問題を調査します。ソースフリーであることは、特にターゲットデータセットがラベル付けされていないことを考慮する場合、DAに大きな課題を追加します。 SFDAの問題を解決するために、ターゲット画像のスタイルを目に見えないソース画像のスタイルに変換する画像変換アプローチを提案します。このため、生成された画像のバッチごとの機能統計を、事前トレーニング済みモデルのバッチ正規化レイヤーに格納されている統計に合わせます。ターゲット画像を直接分類する場合と比較して、事前トレーニング済みモデルを使用してこれらのスタイルで転送された画像を使用すると、より高い精度が得られます。いくつかの画像分類データセットでは、上記の改善が一貫しており、統計的に有意であることを示しています。
Effort in releasing large-scale datasets may be compromised by privacy and intellectual property considerations. A feasible alternative is to release pre-trained models instead. While these models are strong on their original task (source domain), their performance might degrade significantly when deployed directly in a new environment (target domain), which might not contain labels for training under realistic settings. Domain adaptation (DA) is a known solution to the domain gap problem, but usually requires labeled source data. In this paper, we study the problem of source free domain adaptation (SFDA), whose distinctive feature is that the source domain only provides a pre-trained model, but no source data. Being source free adds significant challenges to DA, especially when considering that the target dataset is unlabeled. To solve the SFDA problem, we propose an image translation approach that transfers the style of target images to that of unseen source images. To this end, we align the batch-wise feature statistics of generated images to that stored in batch normalization layers of the pre-trained model. Compared with directly classifying target images, higher accuracy is obtained with these style transferred images using the pre-trained model. On several image classification datasets, we show that the above-mentioned improvements are consistent and statistically significant.
updated: Sun May 16 2021 07:11:57 GMT+0000 (UTC)
published: Mon Aug 17 2020 17:57:33 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト