arXiv reaDer
大規模なゼロショット学習のための文書表現の再検討
Revisiting Document Representations for Large-Scale Zero-Shot Learning
ゼロショット学習は、セマンティック表現を使用して、見えないオブジェクトを認識することを目的としています。ほとんどの既存の作品は、人間によってラベル付けされた視覚的属性を使用しており、大規模なアプリケーションには適していません。この論文では、意味表現としてのドキュメントの使用を再検討します。ウィキペディアのページのようなドキュメントには豊富な視覚情報が含まれていると主張しますが、それは膨大な量の非視覚的な文章によって簡単に埋められる可能性があります。この問題に対処するために、ドキュメントセクションヘッダーとビジュアルセンテンスのクラスタリング構造を活用するビジュアルセンテンス抽出の半自動メカニズムを提案します。抽出された視覚文は、類似したクラスを区別するための新しい均等化スキームの後、本質的に視覚属性のような意味表現を形成しますが、人間の労力ははるかに少なくて済みます。 10,000を超える未表示のクラスがあるImageNetデータセットでは、私たちの表現は、一般的に使用されているものと比較して64%の相対的な改善につながります。
Zero-shot learning aims to recognize unseen objects using their semantic representations. Most existing works use visual attributes labeled by humans, not suitable for large-scale applications. In this paper, we revisit the use of documents as semantic representations. We argue that documents like Wikipedia pages contain rich visual information, which however can easily be buried by the vast amount of non-visual sentences. To address this issue, we propose a semi-automatic mechanism for visual sentence extraction that leverages the document section headers and the clustering structure of visual sentences. The extracted visual sentences, after a novel weighting scheme to distinguish similar classes, essentially form semantic representations like visual attributes but need much less human effort. On the ImageNet dataset with over 10,000 unseen classes, our representations lead to a 64% relative improvement against the commonly used ones.
updated: Wed Apr 21 2021 05:17:55 GMT+0000 (UTC)
published: Wed Apr 21 2021 05:17:55 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト