arXiv reaDer
IntersectGAN: Learning Domain Intersection for Generating Images with Multiple Attributes
  生成的敵対ネットワーク(GAN)は、さまざまな視覚的コンテンツの生成に大きな成功を収めています。ただし、既存のGANによって生成される画像は、多くの場合、1つの画像ドメインから学習した属性(笑顔表現など)のものです。その結果、複数の属性の画像を生成するには、収集するのに非常にリソースがかかる複数の属性を持つ多くの実際のサンプルが必要です。本論文では、交差するアーキテクチャを介して異なる画像ドメインから複数の属性を学習するために、新しいGAN、すなわちIntersectGANを提案します。たとえば、特定の属性を持つ2つの画像ドメイン$ X_1 $と$ X_2 $が与えられた場合、交差$ X_1 \ cap X_2 $は、画像が$ X_1 $と$ X_2 $の両方のドメインの属性を持つ新しいドメインを示します。提案されているIntersectGANは、異なるドメインの生成サンプルと実際のサンプルを区別するための2つの弁別子$ D_1 $と$ D_2 $、および交差ジェネレータが両方の弁別子に対してトレーニングされる3つのジェネレータで構成されます。そして、全体的な敵対的損失関数は、3つのジェネレーターにわたって定義されます。その結果、提案されたIntersectGANは、それぞれが1つの特定の属性を示す複数のドメインでトレーニングでき、最終的に複数の属性を同時に持つ実際のサンプル画像の必要性を排除します。 CelebFaces Attributesデータセットを使用することにより、提案されたIntersectGANは、複数の属性(たとえば、黒い髪と笑顔の顔)を持つ高品質の顔画像を生成できます。提案されているIntersectGANと他のベースラインメソッドを比較するために、定性的および定量的な評価が行われています。その上、IntersectGANのいくつかの異なるアプリケーションが有望な結果とともに調査されました。
Generative adversarial networks (GANs) have demonstrated great success in generating various visual content. However, images generated by existing GANs are often of attributes (e.g., smiling expression) learned from one image domain. As a result, generating images of multiple attributes requires many real samples possessing multiple attributes which are very resource expensive to be collected. In this paper, we propose a novel GAN, namely IntersectGAN, to learn multiple attributes from different image domains through an intersecting architecture. For example, given two image domains $X_1$ and $X_2$ with certain attributes, the intersection $X_1 \cap X_2$ denotes a new domain where images possess the attributes from both $X_1$ and $X_2$ domains. The proposed IntersectGAN consists of two discriminators $D_1$ and $D_2$ to distinguish between generated and real samples of different domains, and three generators where the intersection generator is trained against both discriminators. And an overall adversarial loss function is defined over three generators. As a result, our proposed IntersectGAN can be trained on multiple domains of which each presents one specific attribute, and eventually eliminates the need of real sample images simultaneously possessing multiple attributes. By using the CelebFaces Attributes dataset, our proposed IntersectGAN is able to produce high quality face images possessing multiple attributes (e.g., a face with black hair and a smiling expression). Both qualitative and quantitative evaluations are conducted to compare our proposed IntersectGAN with other baseline methods. Besides, several different applications of IntersectGAN have been explored with promising results.
updated: Thu Oct 03 2019 10:18:21 GMT+0000 (UTC)
published: Sat Sep 21 2019 03:40:02 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト