arXiv reaDer
TAL:一般化可能な個人の再識別のための2ストリームアダプティブラーニング
TAL: Two-stream Adaptive Learning for Generalizable Person Re-identification
ドメインの一般化可能な個人の再識別は、訓練されたモデルを見えないドメインに適用することを目的としています。以前の作業では、すべてのトレーニングドメインのデータを組み合わせてドメイン不変の機能をキャプチャするか、専門家の混合を採用してドメイン固有の情報を調査します。この作業では、ドメイン固有の機能とドメイン不変の機能の両方が、re-idモデルの一般化能力を向上させるために重要であると主張します。この目的のために、これら2種類の情報を同時にモデル化するために、2ストリームアダプティブラーニング(TAL)と名付けた新しいフレームワークを設計します。具体的には、ドメイン固有のストリームは、バッチ正規化(BN)パラメーターを使用してトレーニングドメイン統計をキャプチャするために提案され、適応マッチングレイヤーはドメインレベルの情報を動的に集約するように設計されています。それまでの間、ドメイン不変ストリームに適応型BNレイヤーを設計して、さまざまな見えないドメインの統計を概算します。これらの2つのストリームは、適応的かつ協調的に機能して、一般化可能なre-id機能を学習します。私たちのフレームワークは、シングルソースとマルチソースの両方のドメイン一般化タスクに適用できます。実験結果は、私たちのフレームワークが最先端の方法を大幅に上回っていることを示しています。
Domain generalizable person re-identification aims to apply a trained model to unseen domains. Prior works either combine the data in all the training domains to capture domain-invariant features, or adopt a mixture of experts to investigate domain-specific information. In this work, we argue that both domain-specific and domain-invariant features are crucial for improving the generalization ability of re-id models. To this end, we design a novel framework, which we name two-stream adaptive learning (TAL), to simultaneously model these two kinds of information. Specifically, a domain-specific stream is proposed to capture training domain statistics with batch normalization (BN) parameters, while an adaptive matching layer is designed to dynamically aggregate domain-level information. In the meantime, we design an adaptive BN layer in the domain-invariant stream, to approximate the statistics of various unseen domains. These two streams work adaptively and collaboratively to learn generalizable re-id features. Our framework can be applied to both single-source and multi-source domain generalization tasks, where experimental results show that our framework notably outperforms the state-of-the-art methods.
updated: Mon Nov 29 2021 01:27:42 GMT+0000 (UTC)
published: Mon Nov 29 2021 01:27:42 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト