arXiv reaDer
きめ細かい分類のための統合された一般化ゼロショット学習
Integrated Generalized Zero-Shot Learning for Fine-Grained Classification
埋め込み学習(EL)と機能合成(FS)は、きめ細かいGZSLメソッドの一般的なカテゴリの2つです。グローバル機能を使用するELまたはFSは、ローカル機能がない場合、詳細を区別できません。一方、ローカル機能を利用するELまたはFSメソッドは、直接属性ガイダンスまたはグローバル情報を無視します。したがって、どちらの方法もうまく機能しません。この論文では、きめ細かいGZSLのために統合された方法で、ELとFSの両方のカテゴリのグローバルおよび直接属性監視ローカル視覚機能を調査することを提案します。提案された統合ネットワークには、ELサブネットワークとFSサブネットワークがあります。したがって、提案された統合ネットワークは2つの方法でテストできます。属性誘導局所視覚的特徴を発見するための新しい2段階の密な注意メカニズムを提案します。最適化のために相互に有益な情報を活用するために、サブネットワーク間の新しい相互学習を導入します。さらに、相互情報量に基づいてソースとターゲットのクラスの類似性を計算し、ターゲットクラスを転送学習して、テスト中のソースドメインへのバイアスを減らすことを提案します。提案された方法がベンチマークデータセットの現在の方法よりも優れていることを示します。
Embedding learning (EL) and feature synthesizing (FS) are two of the popular categories of fine-grained GZSL methods. EL or FS using global features cannot discriminate fine details in the absence of local features. On the other hand, EL or FS methods exploiting local features either neglect direct attribute guidance or global information. Consequently, neither method performs well. In this paper, we propose to explore global and direct attribute-supervised local visual features for both EL and FS categories in an integrated manner for fine-grained GZSL. The proposed integrated network has an EL sub-network and a FS sub-network. Consequently, the proposed integrated network can be tested in two ways. We propose a novel two-step dense attention mechanism to discover attribute-guided local visual features. We introduce new mutual learning between the sub-networks to exploit mutually beneficial information for optimization. Moreover, we propose to compute source-target class similarity based on mutual information and transfer-learn the target classes to reduce bias towards the source domain during testing. We demonstrate that our proposed method outperforms contemporary methods on benchmark datasets.
updated: Sun Aug 15 2021 08:52:19 GMT+0000 (UTC)
published: Thu Dec 31 2020 21:38:46 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト