arXiv reaDer
SALT: Subspace Alignment as an Auxiliary Learning Task for Domain Adaptation
 教師なしドメイン適応は、ラベル付きソースドメインから学習した知識をラベルなしターゲットドメインに転送して適応させることを目的としています。監視なしドメイン適応の主要コンポーネントには、(a)ターゲットのパフォーマンスの最大化、および(b)ソースドメインとターゲットドメインの調整が含まれます。従来、これらのタスクは個別と見なされるか、大容量の特徴抽出機能と暗黙的に対処されると想定されていました。個別に検討すると、通常、部分空間アライメントなどの幾何学的アプローチまたは最適なトランスポートなどの分布アライメントを通じて、アライメントはデータ分布をアライメントする問題と見なされます。このホワイトペーパーでは、部分空間の形式で単純化されたデータジオメトリを想定し、ソースのパフォーマンスを最大化する主要なタスクの補助タスクとしてアライメントを検討するハイブリッドアプローチを表します。部分空間の形で扱いやすいデータジオメトリを活用することで、アライメントはかなり単純になります。閉じた形式の補助解から派生した特定のパラメーターを、主要タスクからの勾配の影響を相乗的に許容します。提案されたアプローチは、データ駆動型の主要なタスクからの勾配と幾何学的およびモデルベースのアライメントのユニークな融合を表しています。 SALTと呼ばれる私たちのアプローチは、複数の標準ベンチマークで同等または最先端のパフォーマンスを達成するシンプルなフレームワークです。
Unsupervised domain adaptation aims to transfer and adapt knowledge learned from a labeled source domain to an unlabeled target domain. Key components of unsupervised domain adaptation include: (a) maximizing performance on the target, and (b) aligning the source and target domains. Traditionally, these tasks have either been considered as separate, or assumed to be implicitly addressed together with high-capacity feature extractors. When considered separately, alignment is usually viewed as a problem of aligning data distributions, either through geometric approaches such as subspace alignment or through distributional alignment such as optimal transport. This paper represents a hybrid approach, where we assume simplified data geometry in the form of subspaces, and consider alignment as an auxiliary task to the primary task of maximizing performance on the source. The alignment is made rather simple by leveraging tractable data geometry in the form of subspaces. We synergistically allow certain parameters derived from the closed-form auxiliary solution, to be affected by gradients from the primary task. The proposed approach represents a unique fusion of geometric and model-based alignment with gradients from a data-driven primary task. Our approach termed SALT, is a simple framework that achieves comparable or sometimes outperforms state-of-the-art on multiple standard benchmarks.
updated: Thu Dec 19 2019 02:10:38 GMT+0000 (UTC)
published: Tue Jun 11 2019 01:20:12 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト