arXiv reaDer
CIZSL ++:創造性に触発されたジェネレーティブゼロショット学習
CIZSL++: Creativity Inspired Generative Zero-Shot Learning
ゼロショット学習(ZSL)は、クラスレベルの説明からのトレーニング例なしで、目に見えないカテゴリを理解することを目的としています。 ZSLの識別力を向上させるために、新しいアートを作成するための人間の創造性の心理学からインスピレーションを得て、目に見えないカテゴリの視覚学習プロセスをモデル化します。まず、生成的ZSLの創造性に触発されたモデルとしてCIZSL-v1を提案します。 ZSLは目に見えないものを認識することであり、創造性は好感の持てる目に見えないものを作り出すことであるということを観察することによって、ZSLを人間の創造性に関連付けます。幻覚のクラスの説明で見えない空間を探索し、見たクラスから見えないクラスへの知識の伝達を可能にしながら、見たクラスからの視覚的特徴の世代の注意深い逸脱を奨励する創造性文学に触発された学習信号を紹介します。第二に、CIZSL-v2は、生成的ゼロショット学習のためのCIZSL-v1の改良版として提案されています。 CIZSL-v2は、セマンティックガイド付きディスクリミネーターとともに、見えないクラスの追加の帰納的損失の調査で構成されています。経験的に、CIZSLの損失は、CUBおよびNABirdsデータセットのノイズの多いテキストから、一般化されたZSLの困難なタスクで生成ZSLモデルを改善できることを一貫して示しています。また、AwA2、aPY、およびSUNデータセットでの属性ベースのZSLへのアプローチの利点も示します。また、CIZSL-v2がCIZSL-v1と比較してパフォーマンスが向上していることも示しています。
Zero-shot learning (ZSL) aims at understanding unseen categories with no training examples from class-level descriptions. To improve the discriminative power of ZSL, we model the visual learning process of unseen categories with inspiration from the psychology of human creativity for producing novel art. First, we propose CIZSL-v1 as a creativity inspired model for generative ZSL. We relate ZSL to human creativity by observing that ZSL is about recognizing the unseen, and creativity is about creating a likable unseen. We introduce a learning signal inspired by creativity literature that explores the unseen space with hallucinated class-descriptions and encourages careful deviation of their visual feature generations from seen classes while allowing knowledge transfer from seen to unseen classes. Second, CIZSL-v2 is proposed as an improved version of CIZSL-v1 for generative zero-shot learning. CIZSL-v2 consists of an investigation of additional inductive losses for unseen classes along with a semantic guided discriminator. Empirically, we show consistently that CIZSL losses can improve generative ZSL models on the challenging task of generalized ZSL from a noisy text on CUB and NABirds datasets. We also show the advantage of our approach to Attribute-based ZSL on AwA2, aPY, and SUN datasets. We also show that CIZSL-v2 has improved performance compared to CIZSL-v1.
updated: Wed Feb 17 2021 09:08:51 GMT+0000 (UTC)
published: Fri Jan 01 2021 05:47:57 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト