解きほぐされた解釈可能な表現を学ぶことは、多様体で包括的なデータ表現を達成するための重要なステップです。本論文では、変分オートエンコーダ(VAE)の推論能力と敵対的生成ネットワーク(GAN)の一般化能力を組み合わせた新しい表現学習アルゴリズムを提案します。 InfoVAEGANと呼ばれる提案されたモデルは、エンコーダー、ジェネレーター、ディスクリミネーターの3つのネットワークで構成されています。 InfoVAEGANは、ジェネレーターの分布からサンプリングされた変数に対して2つの異なるデータフリーの対数尤度関数を使用することにより、教師なしの方法で離散的かつ連続的な解釈可能な表現を共同で学習することを目的としています。ジェネレータトレーニングとは別に、推論ネットワークを最適化するための2段階アルゴリズムを提案します。さらに、既存の潜在変数と生成および推論プロセスによって作成された潜在変数との間の相互情報量を最大化することにより、解釈可能な表現の学習を実施します。
Learning disentangled and interpretable representations is an important step towards accomplishing comprehensive data representations on the manifold. In this paper, we propose a novel representation learning algorithm which combines the inference abilities of Variational Autoencoders (VAE) with the generalization capability of Generative Adversarial Networks (GAN). The proposed model, called InfoVAEGAN, consists of three networks~: Encoder, Generator and Discriminator. InfoVAEGAN aims to jointly learn discrete and continuous interpretable representations in an unsupervised manner by using two different data-free log-likelihood functions onto the variables sampled from the generator's distribution. We propose a two-stage algorithm for optimizing the inference network separately from the generator training. Moreover, we enforce the learning of interpretable representations through the maximization of the mutual information between the existing latent variables and those created through generative and inference processes.