arXiv reaDer
Generative Replay-based Continual Zero-Shot Learning
ゼロショット学習は、トレーニング時に利用できないクラスからオブジェクトを分類する新しいパラダイムです。ゼロショット学習 (ZSL) メソッドは、目に見えない/新しいクラスの例を分類できるため、近年かなり注目されています。 ZSL に関する既存のアプローチのほとんどは、実際の生活に適していないモデルをトレーニングするために、見られるクラスからのすべてのサンプルが利用可能である場合に機能します。この論文では、生成リプレイベースの継続的な ZSL (GRCZSL) を開発することにより、この障害に取り組みます。提案された方法は、従来の ZSL がストリーミング データから学習し、以前のタスクで得られた経験を忘れることなく新しい知識を取得することを可能にします。 GRCZSL では、以前のタスクで出現した、見られたクラスの合成サンプルを再生することにより、壊滅的な忘却に対処します。これらの合成サンプルは、直前の過去のタスクに対して訓練された条件付き変動オートエンコーダー (VAE) を使用して合成されます。さらに、トレーニングとテストでは、いつでも現在および直前の VAE のみが必要です。提案された GRZSL メソッドは、実世界の問題設定をシミュレートする、連続学習のシングルヘッド設定用に開発されました。この設定では、タスク ID はトレーニング中に提供されますが、テスト中には利用できません。 GRCZSL のパフォーマンスは、継続学習の固定および動的 (増分クラス) 設定を使用した ZSL の一般化されたセットアップの 5 つのベンチマーク データセットで評価されます。最近文献に示された既存のクラス設定は、クラスインクリメンタル設定には適していません。したがって、このペーパーでは、この問題に対処するための新しい設定を提案します。実験結果は、提案された方法がベースラインおよび最先端の方法よりも大幅に優れており、実際のアプリケーションにより適していることを示しています。
Zero-shot learning is a new paradigm to classify objects from classes that are not available at training time. Zero-shot learning (ZSL) methods have attracted considerable attention in recent years because of their ability to classify unseen/novel class examples. Most of the existing approaches on ZSL works when all the samples from seen classes are available to train the model, which does not suit real life. In this paper, we tackle this hindrance by developing a generative replay-based continual ZSL (GRCZSL). The proposed method endows traditional ZSL to learn from streaming data and acquire new knowledge without forgetting the previous tasks' gained experience. We handle catastrophic forgetting in GRCZSL by replaying the synthetic samples of seen classes, which have appeared in the earlier tasks. These synthetic samples are synthesized using the trained conditional variational autoencoder (VAE) over the immediate past task. Moreover, we only require the current and immediate previous VAE at any time for training and testing. The proposed GRZSL method is developed for a single-head setting of continual learning, simulating a real-world problem setting. In this setting, task identity is given during training but unavailable during testing. GRCZSL performance is evaluated on five benchmark datasets for the generalized setup of ZSL with fixed and dynamic (incremental class) settings of continual learning. The existing class setting presented recently in the literature is not suitable for a class-incremental setting. Therefore, this paper proposes a new setting to address this issue. Experimental results show that the proposed method significantly outperforms the baseline and the state-of-the-art method and makes it more suitable for real-world applications.
updated: Mon Jun 07 2021 00:44:37 GMT+0000 (UTC)
published: Fri Jan 22 2021 00:03:34 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト