インスタンスの識別に基づく自己教師あり学習アルゴリズムは、表現の崩壊を効果的に防止し、表現学習において有望な結果を生み出します。ただし、埋め込み空間で正のペア (つまり、同じインスタンスの 2 つのビュー) を引き付け、カテゴリに関係なく他のすべてのインスタンス (つまり、負のペア) を反発するプロセスでは、重要な特徴が破棄される可能性があります。この問題に対処するために、類似の意味論的コンテンツを持つ画像を識別し、それらをセマンティックポジティブペアセット(SPPS)と呼ばれるポジティブインスタンスとして扱うアプローチを提案します。これにより、表現学習中に重要な特徴が破棄されるリスクが軽減されます。私たちのアプローチは、SimCLR や MOCO などのあらゆる対照的なインスタンス識別フレームワークで機能する可能性があります。 ImageNet、STL-10、CIFAR-10 の 3 つのデータセットで実験を実施し、アプローチを評価します。実験結果は、3 つのデータセットすべてにわたって、私たちのアプローチがベースライン手法であるバニラ SimCLR よりも一貫して優れていることを示しています。たとえば、私たちのアプローチは、バッチサイズ 1024 および 800 エポックの ImageNet 上で、線形評価プロトコルの下で標準の SimCLR を 4.18% 改善します。
Self-supervised learning algorithms based on instance discrimination effectively prevent representation collapse and produce promising results in representation learning. However, the process of attracting positive pairs (i.e., two views of the same instance) in the embedding space and repelling all other instances (i.e., negative pairs) irrespective of their categories could result in discarding important features. To address this issue, we propose an approach to identifying those images with similar semantic content and treating them as positive instances, named semantic positive pairs set (SPPS), thereby reducing the risk of discarding important features during representation learning. Our approach could work with any contrastive instance discrimination framework such as SimCLR or MOCO. We conduct experiments on three datasets: ImageNet, STL-10 and CIFAR-10 to evaluate our approach. The experimental results show that our approach consistently outperforms the baseline method vanilla SimCLR across all three datasets; for example, our approach improves upon vanilla SimCLR under linear evaluation protocol by 4.18% on ImageNet with a batch size 1024 and 800 epochs.