この論文では、生涯ツイン生成的敵対的ネットワーク(LT-GAN)と呼ばれる新しい継続的に学習する生成モデルを提案します。 LT-GANは、いくつかのデータベースから一連のタスクを学習し、そのアーキテクチャは3つのコンポーネントで構成されています。2つの同一のジェネレーター、つまりTeacherとAssistant、および1つのDiscriminatorです。 LT-GANが忘れずに新しい概念を学習できるようにするために、新しい生涯トレーニングアプローチ、つまり生涯敵対的知識蒸留(LAKD)を導入します。これは、新しいデータベースを学習しながら、教師とアシスタントが交互に教え合うことを奨励します。 。このトレーニングアプローチは、より知識のあるプレーヤーから、以前に与えられたタスクについてあまり情報を知らない別のプレーヤーに知識を転送することを支持します。
In this paper, we propose a new continuously learning generative model, called the Lifelong Twin Generative Adversarial Networks (LT-GANs). LT-GANs learns a sequence of tasks from several databases and its architecture consists of three components: two identical generators, namely the Teacher and Assistant, and one Discriminator. In order to allow for the LT-GANs to learn new concepts without forgetting, we introduce a new lifelong training approach, namely Lifelong Adversarial Knowledge Distillation (LAKD), which encourages the Teacher and Assistant to alternately teach each other, while learning a new database. This training approach favours transferring knowledge from a more knowledgeable player to another player which knows less information about a previously given task.