arXiv reaDer
ゼロショット学習のためのセマンティックガイド付きマルチアテンションローカリゼーション
Semantic-Guided Multi-Attention Localization for Zero-Shot Learning
 ゼロショット学習は、クラスのセマンティック表現を導入することにより、従来のオブジェクト分類を目に見えないクラス認識に拡張します。既存のアプローチは、主に視覚的セマンティック埋め込みのための適切なマッピング機能の学習に焦点を当てていますが、識別的視覚的特徴の学習の効果を無視しています。この論文では、識別領域局在化の重要性を研究しています。私たちは、セマンティックガイド付きマルチアテンションローカリゼーションモデルを提案します。これは、人間の注釈なしでゼロショット学習のためにオブジェクトの最も識別的な部分を自動的に発見します。私たちのモデルは、検出された部分だけでなく、オブジェクト全体から協調的なグローバルおよびローカルの特徴を共同で学習し、セマンティック記述に基づいてオブジェクトを分類します。さらに、ソフトマックス損失とクラス中心トリプレット損失の埋め込みの共同監督により、モデルは、クラス間分散とクラス内コンパクト性の高い機能を学習することが推奨されます。広く使用されている3つのゼロショット学習ベンチマークの包括的な実験を通じて、マルチアテンションローカリゼーションの有効性を示し、提案されたアプローチにより、最先端の結果をかなりのマージンで改善します。
Zero-shot learning extends the conventional object classification to the unseen class recognition by introducing semantic representations of classes. Existing approaches predominantly focus on learning the proper mapping function for visual-semantic embedding, while neglecting the effect of learning discriminative visual features. In this paper, we study the significance of the discriminative region localization. We propose a semantic-guided multi-attention localization model, which automatically discovers the most discriminative parts of objects for zero-shot learning without any human annotations. Our model jointly learns cooperative global and local features from the whole object as well as the detected parts to categorize objects based on semantic descriptions. Moreover, with the joint supervision of embedding softmax loss and class-center triplet loss, the model is encouraged to learn features with high inter-class dispersion and intra-class compactness. Through comprehensive experiments on three widely used zero-shot learning benchmarks, we show the efficacy of the multi-attention localization and our proposed approach improves the state-of-the-art results by a considerable margin.
updated: Mon Dec 02 2019 03:20:41 GMT+0000 (UTC)
published: Fri Mar 01 2019 19:25:24 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト