arXiv reaDer
少数ショット学習のための訓練可能なクラスプロトタイプ
Trainable Class Prototypes for Few-Shot Learning
メトリック学習は、プロトタイプの品質がアルゴリズムで重要な役割を果たす少数のショット学習に広く使用されている方法です。この論文では、メタトレーニングとタスクトレーニングのフレームワーク内で、人工的なものではなく、距離測定のためのトレーニング可能なプロトタイプを提案します。また、エピソードメタトレーニングがもたらす不利な点を回避するために、自己教師あり学習に基づく非エピソードメタトレーニングを採用しています。全体として、2つのフェーズで数ショットのタスクを解決します。自己教師あり学習による転送可能な特徴抽出器のメタトレーニングと、メトリック分類のためのプロトタイプのトレーニングです。さらに、単純な注意メカニズムは、メタトレーニングとタスクトレーニングの両方で使用されます。私たちの方法は、標準の数ショット視覚分類データセットで確立されたさまざまな数ショットタスクで最先端のパフォーマンスを実現し、利用可能な教師なし数ショット学習方法と比較して約20%増加します。
Metric learning is a widely used method for few shot learning in which the quality of prototypes plays a key role in the algorithm. In this paper we propose the trainable prototypes for distance measure instead of the artificial ones within the meta-training and task-training framework. Also to avoid the disadvantages that the episodic meta-training brought, we adopt non-episodic meta-training based on self-supervised learning. Overall we solve the few-shot tasks in two phases: meta-training a transferable feature extractor via self-supervised learning and training the prototypes for metric classification. In addition, the simple attention mechanism is used in both meta-training and task-training. Our method achieves state-of-the-art performance in a variety of established few-shot tasks on the standard few-shot visual classification dataset, with about 20% increase compared to the available unsupervised few-shot learning methods.
updated: Mon Jun 21 2021 04:19:56 GMT+0000 (UTC)
published: Mon Jun 21 2021 04:19:56 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト