arXiv reaDer
生成的敵対的ネットワークの効率的なトレーニングのためのサンプル混合法の効果の経験的研究
An Empirical Study of the Effects of Sample-Mixing Methods for Efficient Training of Generative Adversarial Networks
生成的敵対的ネットワーク(GAN)のトレーニングでは、生成者が高品質のサンプルを提供する前に、膨大な反復が必要になることはよく知られています。この問題に取り組むためのいくつかの研究がありますが、それでも普遍的な解決策はありません。この論文では、この問題を軽減するために、サンプル混合方法、つまりMixup、CutMix、および新しく提案されたSmoothed Regional Mix(SRMix)の効果を調査しました。サンプル混合法は、幅広い分類問題の精度と堅牢性を向上させることが知られており、弁別器の役割は実際のサンプルと偽のサンプルの分類として解釈できるため、GANにも当然適用できます。また、本物と偽物の明確な「ラベル」がない飽和損失のあるGANにサンプル混合法を適用する新しい形式を提案しました。 LSUNおよびCelebAデータセットを使用して、膨大な量の数値実験を実行しました。結果は、MixupとSRMixがほとんどの場合FIDに関して生成された画像の品質を改善したことを示しました。特に、SRMixはほとんどの場合最高の改善を示しました。私たちの分析は、混合サンプルがバニラの偽のサンプルとは異なる特性を提供する可能性があり、混合パターンが弁別子の決定に強く影響することを示しています。生成されたMixupの画像には優れた高レベルの機能がありますが、低レベルの機能はそれほど印象的ではありません。一方、CutMixは逆の傾向を示しました。私たちのSRMixは中程度の傾向を示しました。つまり、高レベルと低レベルの優れた機能を示しました。私たちの発見は、GANの収束を加速し、生成されたサンプルの品質を向上させるための新しい視点を提供すると信じています。
It is well-known that training of generative adversarial networks (GANs) requires huge iterations before the generator's providing good-quality samples. Although there are several studies to tackle this problem, there is still no universal solution. In this paper, we investigated the effect of sample mixing methods, that is, Mixup, CutMix, and newly proposed Smoothed Regional Mix (SRMix), to alleviate this problem. The sample-mixing methods are known to enhance the accuracy and robustness in the wide range of classification problems, and can naturally be applicable to GANs because the role of the discriminator can be interpreted as the classification between real and fake samples. We also proposed a new formalism applying the sample-mixing methods to GANs with the saturated losses which do not have a clear "label" of real and fake. We performed a vast amount of numerical experiments using LSUN and CelebA datasets. The results showed that Mixup and SRMix improved the quality of the generated images in terms of FID in most cases, in particular, SRMix showed the best improvement in most cases. Our analysis indicates that the mixed-samples can provide different properties from the vanilla fake samples, and the mixing pattern strongly affects the decision of the discriminators. The generated images of Mixup have good high-level feature but low-level feature is not so impressible. On the other hand, CutMix showed the opposite tendency. Our SRMix showed the middle tendency, that is, showed good high and low level features. We believe that our finding provides a new perspective to accelerate the GANs convergence and improve the quality of generated samples.
updated: Thu Apr 08 2021 06:40:23 GMT+0000 (UTC)
published: Thu Apr 08 2021 06:40:23 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト