arXiv reaDer
複数インスタンス増強による視覚的特徴のK-Shot対照学習
K-Shot Contrastive Learning of Visual Features with Multiple Instance Augmentations
この論文では、個々のインスタンス内のサンプル変動を調査するために複数の拡張を適用することにより、視覚的特徴のK-Shot Contrastive Learning(KSCL)を提案します。これは、異なるインスタンスを区別するための識別機能を学習することによりインスタンス間識別の利点を組み合わせるだけでなく、インスタンスに対する拡張サンプルのバリアントに対してクエリを照合することによりインスタンス内のバリエーションを組み合わせることを目的としています。特に、インスタンスごとに、インスタンスのサブスペースを構築して、Kショット拡張のバリエーションの重要な要素を組み合わせて拡張のバリアントを形成する方法の構成をモデル化します。クエリが与えられると、インスタンスの最も関連性のあるバリアントは、クエリをサブスペースに投影してポジティブインスタンスクラスを予測することによって取得されます。これは、特別なワンショットケースと見なすことができる既存の対照的な学習を一般化します。固有値分解は、インスタンスのサブスペースを構成するために実行され、埋め込みネットワークは、微分可能なサブスペース構成を介してエンドツーエンドでトレーニングできます。実験結果は、提案されたKショットの対比学習が、最新の教師なし手法よりも優れたパフォーマンスを実現することを示しています。
In this paper, we propose the K-Shot Contrastive Learning (KSCL) of visual features by applying multiple augmentations to investigate the sample variations within individual instances. It aims to combine the advantages of inter-instance discrimination by learning discriminative features to distinguish between different instances, as well as intra-instance variations by matching queries against the variants of augmented samples over instances. Particularly, for each instance, it constructs an instance subspace to model the configuration of how the significant factors of variations in K-shot augmentations can be combined to form the variants of augmentations. Given a query, the most relevant variant of instances is then retrieved by projecting the query onto their subspaces to predict the positive instance class. This generalizes the existing contrastive learning that can be viewed as a special one-shot case. An eigenvalue decomposition is performed to configure instance subspaces, and the embedding network can be trained end-to-end through the differentiable subspace configuration. Experiment results demonstrate the proposed K-shot contrastive learning achieves superior performances to the state-of-the-art unsupervised methods.
updated: Mon Feb 01 2021 08:00:58 GMT+0000 (UTC)
published: Mon Jul 27 2020 04:56:41 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト