arXiv reaDer
すべてを支配する 1 つの表現: 一般的な表現を使用した少数ショット学習におけるサポート外の例を特定する
One Representation to Rule Them All: Identifying Out-of-Support Examples in Few-shot Learning with Generic Representations
少数ショット学習の分野は、小さなデータ領域で機能する強力なモデルの開発において目覚ましい進歩を遂げました。これらのメソッドのほぼすべては、遭遇するすべてのラベルのないインスタンスが、例がある少数の既知のクラスに属すると想定しています。これは、「上記のいずれでもない」例が日常的に見つかる実際のユースケースでは問題になる可能性があります。このホワイト ペーパーでは、「サポート対象外」 (OOS) の例と呼ばれるものを特定するというこの課題について説明します。この問題がどのように分布外検出と微妙に異なるかを説明し、ジェネリック表現と呼ばれる固定小数点を使用して、プロトタイプ ネットワーク フレームワーク内で OOS の例を識別する新しい方法について説明します。私たちの方法は、文献にある他の既存のアプローチや、この論文で提案する他のアプローチよりも優れていることを示しています。最後に、そのような一般的な点の使用がモデルの特徴空間のジオメトリにどのように影響するかを調査します。
The field of few-shot learning has made remarkable strides in developing powerful models that can operate in the small data regime. Nearly all of these methods assume every unlabeled instance encountered will belong to a handful of known classes for which one has examples. This can be problematic for real-world use cases where one routinely finds 'none-of-the-above' examples. In this paper we describe this challenge of identifying what we term 'out-of-support' (OOS) examples. We describe how this problem is subtly different from out-of-distribution detection and describe a new method of identifying OOS examples within the Prototypical Networks framework using a fixed point which we call the generic representation. We show that our method outperforms other existing approaches in the literature as well as other approaches that we propose in this paper. Finally, we investigate how the use of such a generic point affects the geometry of a model's feature space.
updated: Wed Jun 02 2021 19:07:27 GMT+0000 (UTC)
published: Wed Jun 02 2021 19:07:27 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト