arXiv reaDer
Memory Replay GANs: learning to generate images from new categories without forgetting
  逐次学習に関するこれまでの研究は、識別モデルにおける忘却の問題に対処しています。このペーパーでは、生成モデルのケースを検討します。特に、新しいカテゴリをシーケンシャルに学習するタスクで、生成的敵対ネットワーク(GAN)を調査します。最初に、順次微調整を行うと、ネットワークが以前のカテゴリから画像を適切に生成できない(つまり、忘れる)ことを示します。この問題に対処するために、メモリリプレイジェネレーターを統合する条件付きGANフレームワークであるメモリリプレイGAN(MeRGAN)を提案します。これらのリプレイを活用して忘却を防ぐための2つの方法、すなわちリプレイとリプレイの調整を伴う共同トレーニングを研究しています。 MNIST、SVHN、およびLSUNデータセットの定性的および定量的な実験結果は、以前のカテゴリの忘却を大幅に軽減しながら、メモリリプレイアプローチが競合イメージを生成できることを示しています。
Previous works on sequential learning address the problem of forgetting in discriminative models. In this paper we consider the case of generative models. In particular, we investigate generative adversarial networks (GANs) in the task of learning new categories in a sequential fashion. We first show that sequential fine tuning renders the network unable to properly generate images from previous categories (i.e. forgetting). Addressing this problem, we propose Memory Replay GANs (MeRGANs), a conditional GAN framework that integrates a memory replay generator. We study two methods to prevent forgetting by leveraging these replays, namely joint training with replay and replay alignment. Qualitative and quantitative experimental results in MNIST, SVHN and LSUN datasets show that our memory replay approach can generate competitive images while significantly mitigating the forgetting of previous categories.
updated: Mon Sep 23 2019 09:59:38 GMT+0000 (UTC)
published: Thu Sep 06 2018 15:45:36 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト