arXiv reaDer
DRANet:教師なしクロスドメイン適応のための表現と適応ネットワークのもつれを解く
DRANet: Disentangling Representation and Adaptation Networks for Unsupervised Cross-Domain Adaptation
この論文では、教師なしクロスドメイン適応のために、画像表現を解きほぐし、潜在空間で視覚的属性を転送するネットワークアーキテクチャであるDRANetを紹介します。ドメインを共有する関連機能を学習する既存のドメイン適応方法とは異なり、DRANetは各ドメインの特性の独自性を保持します。私たちのモデルは、ソース画像とターゲット画像の両方から、コンテンツ(シーン構造)とスタイル(芸術的な外観)の個々の表現をエンコードします。次に、転送されたスタイルファクターを、各ドメインに指定された学習可能な重みとともにコンテンツファクターに組み込むことにより、ドメインを適応させます。この学習フレームワークにより、単一のエンコーダー-デコーダーネットワークで双方向/多方向のドメイン適応が可能になり、ドメインシフトが調整されます。さらに、スタイルを転送しながらシーン構造を保持するのに役立つコンテンツ適応型ドメイン転送モジュールを提案します。広範な実験により、私たちのモデルがコンテンツスタイルの要素をうまく分離し、視覚的に心地よいドメイン転送画像を合成することが示されています。提案された方法は、標準的な数字分類タスクおよびセマンティックセグメンテーションタスクでの最先端のパフォーマンスを示しています。
In this paper, we present DRANet, a network architecture that disentangles image representations and transfers the visual attributes in a latent space for unsupervised cross-domain adaptation. Unlike the existing domain adaptation methods that learn associated features sharing a domain, DRANet preserves the distinctiveness of each domain's characteristics. Our model encodes individual representations of content (scene structure) and style (artistic appearance) from both source and target images. Then, it adapts the domain by incorporating the transferred style factor into the content factor along with learnable weights specified for each domain. This learning framework allows bi-/multi-directional domain adaptation with a single encoder-decoder network and aligns their domain shift. Additionally, we propose a content-adaptive domain transfer module that helps retain scene structure while transferring style. Extensive experiments show our model successfully separates content-style factors and synthesizes visually pleasing domain-transferred images. The proposed method demonstrates state-of-the-art performance on standard digit classification tasks as well as semantic segmentation tasks.
updated: Wed Mar 24 2021 18:54:23 GMT+0000 (UTC)
published: Wed Mar 24 2021 18:54:23 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト