ユニバーサル ドメイン アダプテーション (UniDA) は、ドメイン シフトとカテゴリ シフトを使用して、2 つのデータセット間の知識伝達の問題を扱います。目標は、ラベル付けされていないターゲット サンプルを、「既知」カテゴリの 1 つまたは単一の「不明」カテゴリのいずれかに分類することです。 UniDA の主な問題は、ネガティブ トランスファー、つまり「既知」と「未知」のクラスの不整合です。この目的のために、深いネットワークのさまざまな層で示される負の転送リスクとドメイン不変性の間の興味深いトレードオフを最初に明らかにします。中間レベルのレイヤーで、これら 2 つの指標のバランスをとることができることがわかりました。この洞察に基づいて効果的なフレームワークを設計するために、Bag-of-visual-Words (BoW) から動機を引き出します。中間レベルのレイヤーの BoW のような表現の単語プロトタイプは、高レベルの機能のカテゴリ シフトの影響を受けない可能性が高い、低レベルのビジュアル プリミティブを表します。単語プロトタイプの学習とそれに続く単語ヒストグラムベースの分類を促進する修正を開発します。これに続いて、補助的なプロトタイプ空間アラインメント (SPA) はクローズド セット アラインメントの問題と見なすことができ、それによって負の転送が回避されます。目標タスク UniDA と連携して動作するクローズド セット SPA を有効にする、新しい単語ヒストグラム関連の口実タスクでこれを実現します。既存の UniDA 技術に加えてアプローチの有効性を実証し、3 つの標準 UniDA および Open-Set DA オブジェクト認識ベンチマークで最先端のパフォーマンスを実現します。
Universal Domain Adaptation (UniDA) deals with the problem of knowledge transfer between two datasets with domain-shift as well as category-shift. The goal is to categorize unlabeled target samples, either into one of the "known" categories or into a single "unknown" category. A major problem in UniDA is negative transfer, i.e. misalignment of "known" and "unknown" classes. To this end, we first uncover an intriguing tradeoff between negative-transfer-risk and domain-invariance exhibited at different layers of a deep network. It turns out we can strike a balance between these two metrics at a mid-level layer. Towards designing an effective framework based on this insight, we draw motivation from Bag-of-visual-Words (BoW). Word-prototypes in a BoW-like representation of a mid-level layer would represent lower-level visual primitives that are likely to be unaffected by the category-shift in the high-level features. We develop modifications that encourage learning of word-prototypes followed by word-histogram based classification. Following this, subsidiary prototype-space alignment (SPA) can be seen as a closed-set alignment problem, thereby avoiding negative transfer. We realize this with a novel word-histogram-related pretext task to enable closed-set SPA, operating in conjunction with goal task UniDA. We demonstrate the efficacy of our approach on top of existing UniDA techniques, yielding state-of-the-art performance across three standard UniDA and Open-Set DA object recognition benchmarks.