arXiv reaDer
結合辞書埋め込みを使用したゼロショット画像分類
Zero-Shot Image Classification Using Coupled Dictionary Embedding
ゼロショット学習(ZSL)は、これらの見えないクラスに関するセマンティック情報のみに基づいて、見えないクラスに属する画像を分類するためのフレームワークです。本論文では、連成辞書学習を用いた新しいZSLアルゴリズムを提案する。中心的な考え方は、画像の視覚的特徴と意味的属性が中間空間で同じスパース表現を共有できるということです。表示されたクラスの画像と表示されたクラスと表示されていないクラスのセマンティック属性を使用して、画像の視覚的およびセマンティックな特徴ベクトルをまばらに表すことができる2つの辞書を学習します。 ZSLテスト段階で、ラベル付けされたデータがない場合、視覚データのみを使用して結合スパース表現を見つけることにより、見えないクラスからの画像を属性空間にマッピングできます。次に、画像は、見えないクラスのセマンティック記述が与えられた属性空間で分類されます。また、ZSLのドメインシフトとハブネスの問題に取り組むための属性認識の定式化も提供します。ベンチマークZSLデータセットの最先端のZSLアルゴリズムに対するアプローチの優れたパフォーマンスを実証するために、広範な実験が提供されています。
Zero-shot learning (ZSL) is a framework to classify images belonging to unseen classes based on solely semantic information about these unseen classes. In this paper, we propose a new ZSL algorithm using coupled dictionary learning. The core idea is that the visual features and the semantic attributes of an image can share the same sparse representation in an intermediate space. We use images from seen classes and semantic attributes from seen and unseen classes to learn two dictionaries that can represent sparsely the visual and semantic feature vectors of an image. In the ZSL testing stage and in the absence of labeled data, images from unseen classes can be mapped into the attribute space by finding the joint sparse representation using solely the visual data. The image is then classified in the attribute space given semantic descriptions of unseen classes. We also provide an attribute-aware formulation to tackle domain shift and hubness problems in ZSL. Extensive experiments are provided to demonstrate the superior performance of our approach against the state of the art ZSL algorithms on benchmark ZSL datasets.
updated: Sat Oct 23 2021 17:06:41 GMT+0000 (UTC)
published: Mon Jun 10 2019 01:35:36 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト