arXiv reaDer
少数ショットオープンセット認識のためのグローカルエネルギーベースの学習
Glocal Energy-based Learning for Few-Shot Open-Set Recognition
少数ショット オープン セット認識 (FSOR) は、非常に実用的な価値のある挑戦的なタスクです。未知のクラスからのサンプルを拒否できる一方で、いくつかの例で示されている事前定義されたクローズド セット クラスの 1 つにサンプルを分類することを目的としています。この作業では、新しいエネルギーベースのハイブリッドモデルを提案することにより、FSOR タスクに取り組みます。モデルは 2 つのブランチで構成され、分類ブランチはメトリクスを学習してサンプルを閉集合クラスの 1 つに分類し、エネルギー ブランチは開集合確率を明示的に推定します。オープン セット サンプルの全体的な検出を実現するために、モデルはクラスごとの特徴とピクセルごとの特徴の両方を活用してグローカル エネルギー ベースのスコアを学習します。スコアは、ピクセル単位の特徴を使用して学習されます。モデルは、クラスごとの特徴またはピクセルごとの特徴のいずれかで少数ショットの例から逸脱したサンプルに大きなエネルギー スコアを割り当て、それ以外の場合は小さなエネルギー スコアを割り当てるように強制されます。 3 つの標準 FSOR データセットでの実験は、モデルの優れたパフォーマンスを示しています。
Few-shot open-set recognition (FSOR) is a challenging task of great practical value. It aims to categorize a sample to one of the pre-defined, closed-set classes illustrated by few examples while being able to reject the sample from unknown classes. In this work, we approach the FSOR task by proposing a novel energy-based hybrid model. The model is composed of two branches, where a classification branch learns a metric to classify a sample to one of closed-set classes and the energy branch explicitly estimates the open-set probability. To achieve holistic detection of open-set samples, our model leverages both class-wise and pixel-wise features to learn a glocal energy-based score, in which a global energy score is learned using the class-wise features, while a local energy score is learned using the pixel-wise features. The model is enforced to assign large energy scores to samples that are deviated from the few-shot examples in either the class-wise features or the pixel-wise features, and to assign small energy scores otherwise. Experiments on three standard FSOR datasets show the superior performance of our model.
updated: Mon Apr 24 2023 07:06:50 GMT+0000 (UTC)
published: Mon Apr 24 2023 07:06:50 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト