arXiv reaDer
視覚的タスクにおける教師なし領域適応のカテゴリ コントラスト
Category Contrast for Unsupervised Domain Adaptation in Visual Tasks
教師なし表現学習のインスタンス コントラストは、近年大きな成功を収めています。この作業では、教師なしドメイン適応 (UDA) におけるインスタンス対照学習のアイデアを探り、視覚的 UDA タスクのインスタンス識別に加えてセマンティック優先順位を導入する新しいカテゴリ コントラスト手法 (CaCo) を提案します。インスタンス対照学習を辞書検索操作と見なすことにより、ソース ドメインとターゲット ドメインの両方からのサンプルを使用して、各ターゲット サンプルにソース サンプルのカテゴリ事前に基づいて (疑似) カテゴリ ラベルが割り当てられたセマンティクス認識辞書を構築します。これにより、(ターゲット クエリとカテゴリ レベルの辞書の間で) カテゴリ識別的でありながらドメイン不変な特徴表現のためのカテゴリ対照学習が可能になります: 同じカテゴリのサンプル (ソースまたはターゲット ドメインから) が近くに引っ張られ、異なるカテゴリのサンプルがプッシュされます。同時に離します。複数の視覚的タスク (例えば、セグメンテーション、分類、検出) での広範な UDA 実験は、CaCo の単純な実装が、高度に最適化された最先端の方法と比較して優れたパフォーマンスを達成することを示しています。分析的および経験的に、実験はまた、CaCo が既存の UDA メソッドを補完し、半教師あり学習、教師なしモデル適応などの他の学習設定に一般化可能であることを示しています。
Instance contrast for unsupervised representation learning has achieved great success in recent years. In this work, we explore the idea of instance contrastive learning in unsupervised domain adaptation (UDA) and propose a novel Category Contrast technique (CaCo) that introduces semantic priors on top of instance discrimination for visual UDA tasks. By considering instance contrastive learning as a dictionary look-up operation, we construct a semantics-aware dictionary with samples from both source and target domains where each target sample is assigned a (pseudo) category label based on the category priors of source samples. This allows category contrastive learning (between target queries and the category-level dictionary) for category-discriminative yet domain-invariant feature representations: samples of the same category (from either source or target domain) are pulled closer while those of different categories are pushed apart simultaneously. Extensive UDA experiments in multiple visual tasks (e.g., segmentation, classification and detection) show that the simple implementation of CaCo achieves superior performance as compared with the highly-optimized state-of-the-art methods. Analytically and empirically, the experiments also demonstrate that CaCo is complementary to existing UDA methods and generalizable to other learning setups such as semi-supervised learning, unsupervised model adaptation, etc.
updated: Sat Jun 05 2021 12:51:35 GMT+0000 (UTC)
published: Sat Jun 05 2021 12:51:35 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト