arXiv reaDer
LRS-DAG: Low Resource Supervised Domain Adaptation with Generalization Across Domains
 ドメイン適応の現在の最先端の方法は、敵対的なアプローチに従っており、トレーニングを困難にします。既存の非敵対的方法は、合理的なパフォーマンスを達成するために、ソースドメインとターゲットドメイン間のマッピングを学習します。ただし、これらの方法でも、ターゲットドメインを最適化した後でも、ソースドメインのパフォーマンスを維持するという重要な側面に焦点を合わせていません。さらに、低リソースの監視対象ドメイン適応には、ほとんど方法がありません。この作業では、この分野の現在の問題を解決することを目的とした方法、LRS-DAGを提案します。ターゲットドメインをソースにマッピングし、ソースデータを直接処理するときに削除できる「エンコーダレイヤー」のセットを追加することにより、モデルは両方のドメインで最適に実行することを学習します。 LRS-DAGは、ソースドメインのパフォーマンスを維持する低リソースドメイン適応の新しいアルゴリズムであり、ドメイン間のマッピングを学習するための新しいメトリックが導入されることにより、その独自性を示しています。 FCNの場合、MNISTからSVHNに転送するとき、LRS-DAGはソースドメイン全体でパフォーマンスを維持するという利点とともに、微調整に匹敵するパフォーマンスを発揮することを示します。 LRS-DAGは、MNISTに似た合成データセットに転送する場合の微調整よりも優れています。これは、低リソース監視ドメイン適応のより代表的な設定です。
Current state of the art methods in Domain Adaptation follow adversarial approaches, making training a challenge. Existing non-adversarial methods learn mappings between the source and target domains, to achieve reasonable performance. However, even these methods do not focus on a key aspect: maintaining performance on the source domain, even after optimizing over the target domain. Additionally, there exist very few methods in low resource supervised domain adaptation. This work proposes a method, LRS-DAG, that aims to solve these current issues in the field. By adding a set of "encoder layers" which map the target domain to the source, and can be removed when dealing directly with the source data, the model learns to perform optimally on both domains. LRS-DAG showcases its uniqueness by being a new algorithm for low resource domain adaptation which maintains performance over the source domain, with a new metric for learning mappings between domains being introduced. We show that, in the case of FCNs, when transferring from MNIST to SVHN, LRS-DAG performs comparably to fine tuning, with the advantage of maintaining performance over the source domain. LRS-DAG outperforms fine tuning when transferring to a synthetic dataset similar to MNIST, which is a setting more representative of low resource supervised domain adaptation.
updated: Fri Nov 15 2019 03:57:30 GMT+0000 (UTC)
published: Sun Sep 15 2019 02:38:49 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト