この論文では、少数ショット分類の対照学習を探求します。ここでは、より一般的で転送可能な機能を促進するためのデータ依存正則化として機能する追加の補助トレーニング目標として使用することを提案します。特に、局所的に識別可能でクラスにとらわれない特徴を学習するための、新しい注意ベースの空間的対照的目的を提示します。その結果、私たちのアプローチは、見えないクラスへの特徴の転送可能性を低下させる、見られるクラスに対する過度の識別など、クロスエントロピー損失の制限のいくつかを克服します。広範な実験により、提案された方法が最先端のアプローチよりも優れていることを示し、数ショットの学習のための優れた転送可能な埋め込みを学習することの重要性を確認します。
In this paper, we explore contrastive learning for few-shot classification, in which we propose to use it as an additional auxiliary training objective acting as a data-dependent regularizer to promote more general and transferable features. In particular, we present a novel attention-based spatial contrastive objective to learn locally discriminative and class-agnostic features. As a result, our approach overcomes some of the limitations of the cross-entropy loss, such as its excessive discrimination towards seen classes, which reduces the transferability of features to unseen classes. With extensive experiments, we show that the proposed method outperforms state-of-the-art approaches, confirming the importance of learning good and transferable embeddings for few-shot learning.