arXiv reaDer
少数ショット画像分類のための階層的表現ベースのクエリ固有のプロトタイプネットワーク
Hierarchical Representation based Query-Specific Prototypical Network for Few-Shot Image Classification
少数ショットの画像分類は、少数のラベル付きトレーニングデータで見えないカテゴリを認識することを目的としています。最近のメトリックベースのフレームワークは、固定プロトタイプ(たとえば、サポートカテゴリの平均)によってサポートクラスを表し、クエリインスタンスとサポートプロトタイプ間の類似性に従って分類を行う傾向があります。ただし、識別力のある優勢な領域は、画像の不確実な領域を特定し、さまざまなスケールを持っている可能性があります。これにより、メトリックが不整合になります。さらに、1つのサポートカテゴリの固定プロトタイプは、すべてのクエリインスタンスに適合して、このカテゴリとの距離を正確に反映できるとは限らないため、メトリックの効率が低下します。したがって、高品質のメトリックを得るには、サポートサンプル内のクエリ固有の支配的な領域を抽出する必要があります。これらの問題に対処するために、階層表現ベースのクエリ固有のプロトタイプネットワーク(QPN)を提案し、クエリサンプルごとに領域レベルのプロトタイプを生成することで制限に対処します。これにより、位置と次元の両方のセマンティックアラインメントが同時に実現されます。 5つのベンチマークデータセット(3つのきめ細かいデータセットを含む)で実施された広範な実験は、提案された方法が現在の最先端の方法よりも優れていることを示しています。
Few-shot image classification aims at recognizing unseen categories with a small number of labeled training data. Recent metric-based frameworks tend to represent a support class by a fixed prototype (e.g., the mean of the support category) and make classification according to the similarities between query instances and support prototypes. However, discriminative dominant regions may locate uncertain areas of images and have various scales, which leads to the misaligned metric. Besides, a fixed prototype for one support category cannot fit for all query instances to accurately reflect their distances with this category, which lowers the efficiency of metric. Therefore, query-specific dominant regions in support samples should be extracted for a high-quality metric. To address these problems, we propose a Hierarchical Representation based Query-Specific Prototypical Network (QPN) to tackle the limitations by generating a region-level prototype for each query sample, which achieves both positional and dimensional semantic alignment simultaneously. Extensive experiments conducted on five benchmark datasets (including three fine-grained datasets) show that our proposed method outperforms the current state-of-the-art methods.
updated: Sun Mar 21 2021 12:50:05 GMT+0000 (UTC)
published: Sun Mar 21 2021 12:50:05 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト