arXiv reaDer
ネガティブトランスファーに関する調査
A Survey on Negative Transfer
転移学習(TL)は、1つ以上のソースドメインからのデータまたは知識を利用して、ターゲットドメインでの学習を容易にします。注釈の費用やプライバシーの懸念などにより、ターゲットドメインにラベル付きデータがほとんどないかまったくない場合に特に役立ちます。残念ながら、TLの有効性は常に保証されているわけではありません。ネガティブ転送(NT)、つまり、ソースドメインのデータ/知識を活用すると、ターゲットドメインの学習パフォーマンスが望ましくないほど低下することは、TLでは長年の困難な問題でした。それを処理するために、さまざまなアプローチが文献で提案されています。ただし、NTの定式化、NTにつながる要因、およびNTを軽減するアルゴリズムに関する体系的な調査は存在しません。このホワイトペーパーでは、最初にNTの定義とその要因を紹介し、次に安全な転送、ドメインの類似性の推定、遠隔転送、NTの軽減という、NTを克服するための約50の代表的なアプローチを確認することでこのギャップを埋めます。マルチタスク学習、生涯学習、敵対的攻撃など、関連分野のNTについても説明します。
Transfer learning (TL) utilizes data or knowledge from one or more source domains to facilitate the learning in a target domain. It is particularly useful when the target domain has very few or no labeled data, due to annotation expense, privacy concerns, etc. Unfortunately, the effectiveness of TL is not always guaranteed. Negative transfer (NT), i.e., leveraging source domain data/knowledge undesirably reduces the learning performance in the target domain, has been a long-standing and challenging problem in TL. Various approaches have been proposed in the literature to handle it. However, there does not exist a systematic survey on the formulation of NT, the factors leading to NT, and the algorithms that mitigate NT. This paper fills this gap, by first introducing the definition of NT and its factors, then reviewing about fifty representative approaches for overcoming NT, according to four categories: secure transfer, domain similarity estimation, distant transfer, and NT mitigation. NT in related fields, e.g., multi-task learning, lifelong learning, and adversarial attacks, are also discussed.
updated: Mon Aug 09 2021 12:38:51 GMT+0000 (UTC)
published: Wed Sep 02 2020 09:20:20 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト