arXiv reaDer
Virtual Mixup Training for Unsupervised Domain Adaptation
  ラベル付きソースドメインでトレーニングされたモデルを完全にラベルなしのターゲットドメインに適応させることを目的とする、教師なしドメイン適応の問題を研究します。最近、クラスタの仮定が教師なしドメイン適応に適用され、強力なパフォーマンスが達成されました。クラスター仮定のトレーニングを成功させるための1つの重要な要素は、モデルにローカルリプシッツ制約を課すことです。既存の方法では、トレーニングポイントの周りのローカルリプシッツ制約のみを課し、トレーニングデータ間のポイントなど、他の領域を逃します。このホワイトペーパーでは、モデルがトレーニングポイント間で線形に動作するように奨励することで、この問題に対処します。 Virtual Mixup Training(VMT)と呼ばれる新しい正則化手法を提案します。これは、トレーニングデータ間の領域にローカルリプシッツ制約を組み込むことができます。従来の混同モデルとは異なり、この方法はラベル情報を使用せずに組み合わせサンプルを構築し、教師なしドメイン適応に適用できるようにします。提案された方法は汎用的であり、VADAと呼ばれる最新のモデルなどの既存のほとんどのモデルと組み合わせることができます。広範な実験により、VMTは6つのドメイン適応ベンチマークデータセットでVADAのパフォーマンスを大幅に改善することが実証されています。 MNISTをSVHNに適合させるという困難なタスクのために、VMTはVADAの精度を30%以上向上させることができます。コードは\ url {で入手できます。
We study the problem of unsupervised domain adaptation which aims to adapt models trained on a labeled source domain to a completely unlabeled target domain. Recently, the cluster assumption has been applied to unsupervised domain adaptation and achieved strong performance. One critical factor in successful training of the cluster assumption is to impose the locally-Lipschitz constraint to the model. Existing methods only impose the locally-Lipschitz constraint around the training points while miss the other areas, such as the points in-between training data. In this paper, we address this issue by encouraging the model to behave linearly in-between training points. We propose a new regularization method called Virtual Mixup Training (VMT), which is able to incorporate the locally-Lipschitz constraint to the areas in-between training data. Unlike the traditional mixup model, our method constructs the combination samples without using the label information, allowing it to apply to unsupervised domain adaptation. The proposed method is generic and can be combined with most existing models such as the recent state-of-the-art model called VADA. Extensive experiments demonstrate that VMT significantly improves the performance of VADA on six domain adaptation benchmark datasets. For the challenging task of adapting MNIST to SVHN, VMT can improve the accuracy of VADA by over 30\%. Code is available at \url{
updated: Fri Sep 06 2019 17:32:55 GMT+0000 (UTC)
published: Fri May 10 2019 15:24:17 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト