arXiv reaDer
実用的な少数ショット認識のためのインスタンスベースの最大マージン
Instance-based Max-margin for Practical Few-shot Recognition
人間の少数ショット学習 (FSL) 能力をよりよく模倣し、FSL を現実世界のアプリケーションに近づけるために、この論文では実用的な FSL (pFSL) 設定を提案します。 pFSL は、教師なしの事前トレーニング済みモデル (人間の事前知識に類似) に基づいており、多くの新しいクラスを同時に認識します。従来の FSL と比較して、pFSL は定式化が単純で、評価が容易で、より難しく、より実用的です。トレーニング例の希少性に対処するために、このホワイトペーパーでは、新しい pFSL 設定だけでなく、従来の FSL シナリオでも適切に機能するインスタンスベースの最大マージン手法である IbM2 を提案します。ガウス環状定理に基づいて、IbM2 は、インスタンスに適用されるランダム ノイズを、多方向 pFSL (または従来の FSL) 認識タスクで最大のマージンを達成するメカニズムに変換します。さまざまな自己教師あり事前トレーニング手法とさまざまな多方向または少数方向の FSL タスクを用いた実験では、IbM2 がそれぞれのベースライン手法と比較してほぼ常に改善につながり、ほとんどの場合、その改善が大幅であることが示されています。この論文は、新しい pFSL 設定と新しい IbM2 メソッドの両方を使用して、実用的な少数ショット学習が実行可能かつ有望であることを示しています。
In order to mimic the human few-shot learning (FSL) ability better and to make FSL closer to real-world applications, this paper proposes a practical FSL (pFSL) setting. pFSL is based on unsupervised pretrained models (analogous to human prior knowledge) and recognizes many novel classes simultaneously. Compared to traditional FSL, pFSL is simpler in its formulation, easier to evaluate, more challenging and more practical. To cope with the rarity of training examples, this paper proposes IbM2, an instance-based max-margin method not only for the new pFSL setting, but also works well in traditional FSL scenarios. Based on the Gaussian Annulus Theorem, IbM2 converts random noise applied to the instances into a mechanism to achieve maximum margin in the many-way pFSL (or traditional FSL) recognition task. Experiments with various self-supervised pretraining methods and diverse many- or few-way FSL tasks show that IbM2 almost always leads to improvements compared to its respective baseline methods, and in most cases the improvements are significant. With both the new pFSL setting and novel IbM2 method, this paper shows that practical few-shot learning is both viable and promising.
updated: Sat May 27 2023 04:55:13 GMT+0000 (UTC)
published: Sat May 27 2023 04:55:13 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト