最近の研究では、GAN を使用して人間の顔の間で表情を転送しています。ただし、既存のモデルには多くの欠点があります。感情ラベルに依存している、継続的な表現が不足している、表現の詳細をキャプチャできないなどです。これらの制限に対処するために、感情ラベルを使用せずに連続的な表現伝達を学習できる、2 Cycles Expression Transfer GAN (2CET-GAN) と呼ばれる新しい CycleGAN および InfoGAN ベースのネットワークを提案します。この実験は、私たちのネットワークが多様で質の高い表現を生成し、未知のアイデンティティに一般化できることを示しています。私たちの知る限りでは、教師なしアプローチを使用して、ピクセル レベルでアイデンティティから表現表現を解きほぐすことに成功した最初の企業の 1 つです。
Recent studies have used GAN to transfer expressions between human faces. However, existing models have many flaws: relying on emotion labels, lacking continuous expressions, and failing to capture the expression details. To address these limitations, we propose a novel CycleGAN- and InfoGAN-based network called 2 Cycles Expression Transfer GAN (2CET-GAN), which can learn continuous expression transfer without using emotion labels. The experiment shows our network can generate diverse and high-quality expressions and can generalize to unknown identities. To the best of our knowledge, we are among the first to successfully use an unsupervised approach to disentangle expression representation from identities at the pixel level.