arXiv reaDer
数ショットの画像認識のためのマルチレベルのメトリック学習
Multi-level Metric Learning for Few-shot Image Recognition
少数のショットの学習は、いくつかのサンプルでモデルをトレーニングすることに専念しています。これらのアプローチのほとんどは、ピクセルレベルまたはグローバルレベルの特徴表現に基づいてモデルを学習します。ただし、グローバル機能を使用するとローカル情報が失われる可能性があり、ピクセルレベルの機能を使用すると画像のコンテキストセマンティクスが失われる可能性があります。さらに、そのような作品は、それらの間の関係を単一のレベルでしか測定することができず、包括的で効果的ではありません。また、クエリ画像を3つの異なるレベルの類似性メトリックによって同時に適切に分類できる場合、クラス内のクエリ画像をより小さな特徴空間にさらに密に分散させ、より識別力のある特徴マップを生成できます。これに動機付けられて、タスク固有の機能を生成するためのグラフを使用した新しいパーツレベルの埋め込み適応(PEAG)メソッドを提案します。さらに、ピクセルレベルの類似性を計算するだけでなく、パーツレベルの特徴とグローバルレベルの特徴の類似性も考慮するマルチレベルメトリック学習(MML)メソッドが提案されています。人気のある数ショットの画像認識データセットでの広範な実験は、最先端の方法と比較して、私たちの方法の有効性を証明しています。私たちのコードはhttps://github.com/chenhaoxing/M2Lで入手できます。
Few-shot learning is devoted to training a model on few samples. Most of these approaches learn a model based on a pixel-level or global-level feature representation. However, using global features may lose local information, and using pixel-level features may lose the contextual semantics of the image. Moreover, such works can only measure the relations between them on a single level, which is not comprehensive and effective. And if query images can simultaneously be well classified via three distinct level similarity metrics, the query images within a class can be more tightly distributed in a smaller feature space, generating more discriminative feature maps. Motivated by this, we propose a novel Part-level Embedding Adaptation with Graph (PEAG) method to generate task-specific features. Moreover, a Multi-level Metric Learning (MML) method is proposed, which not only calculates the pixel-level similarity but also considers the similarity of part-level features and global-level features. Extensive experiments on popular few-shot image recognition datasets prove the effectiveness of our method compared with the state-of-the-art methods. Our code is available at https://github.com/chenhaoxing/M2L.
updated: Mon Dec 06 2021 01:58:01 GMT+0000 (UTC)
published: Sun Mar 21 2021 12:49:07 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト