arXiv reaDer
半教師ありドメイン適応のためのタスク分解との深い共同トレーニング
Deep Co-Training with Task Decomposition for Semi-Supervised Domain Adaptation
半教師ありドメイン適応(SSDA)は、ラベル付きソースドメインからトレーニングされたモデルを、ラベルなしデータとラベル付きデータの小さなセットが提供される、異なるが関連するターゲットドメインに適応させることを目的としています。ソースとターゲットの監視を区別せずに処理する現在の方法では、固有の不一致が見落とされ、ターゲットの監視を効果的に使用していないソースが支配的なモデルになります。このホワイトペーパーでは、効果的なSSDAを実現するには、ラベル付けされたターゲットデータを区別する必要があると主張し、SSDAタスクをターゲットドメインの半教師あり学習(SSL)タスクと教師なしドメインの2つのサブタスクに明示的に分解することを提案します。ドメイン間の適応(UDA)タスク。そうすることで、2つのサブタスクは、対応する監視をより有効に活用できるため、非常に異なる分類子を生成できます。 2つの分類器の長所を統合するために、確立された共同トレーニングフレームワークを適用します。このフレームワークでは、2つの分類器が信頼性の高い予測を交換して、両方の分類器がターゲットドメインで優れているように、繰り返し「互いに教え合い」ます。このアプローチを、タスク分解を使用したディープコトレーニング(DeCoTa)と呼びます。 DeCoTaは敵対的なトレーニングを必要とせず、実装が簡単です。さらに、DeCoTaは、共同トレーニングがいつ成功するかという理論的条件に基づいています。その結果、DeCoTaは、いくつかのSSDAデータセットで最先端の結果を達成し、DomainNetで4%のマージンで従来技術を上回っています。
Semi-supervised domain adaptation (SSDA) aims to adapt models trained from a labeled source domain to a different but related target domain, from which unlabeled data and a small set of labeled data are provided. Current methods that treat source and target supervision without distinction overlook their inherent discrepancy, resulting in a source-dominated model that has not effectively use the target supervision. In this paper, we argue that the labeled target data needs to be distinguished for effective SSDA, and propose to explicitly decompose the SSDA task into two sub-tasks: a semi-supervised learning (SSL) task in the target domain and an unsupervised domain adaptation (UDA) task across domains. By doing so, the two sub-tasks can better leverage the corresponding supervision and thus yield very different classifiers. To integrate the strengths of the two classifiers, we apply the well-established co-training framework, in which the two classifiers exchange their high confident predictions to iteratively "teach each other" so that both classifiers can excel in the target domain. We call our approach Deep Co-training with Task decomposition (DeCoTa). DeCoTa requires no adversarial training and is easy to implement. Moreover, DeCoTa is well-founded on the theoretical condition of when co-training would succeed. As a result, DeCoTa achieves state-of-the-art results on several SSDA datasets, outperforming the prior art by a notable 4% margin on DomainNet.
updated: Sat Mar 27 2021 00:32:01 GMT+0000 (UTC)
published: Fri Jul 24 2020 17:57:54 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト