arXiv reaDer
教師なしドメイン適応者再識別のための学習機能融合
Learning Feature Fusion for Unsupervised Domain Adaptive Person Re-identification
教師なしドメイン適応(UDA)の個人再識別(ReID)は、手動の注釈なしでターゲットドメインでの有効性についてますます注目を集めています。ほとんどの微調整ベースのUDA人物ReIDメソッドは、疑似ラベル生成のためのグローバル機能のエンコードに焦点を合わせており、きめ細かい情報を提供できるローカル機能を無視しています。この問題を処理するために、グローバル機能とローカル機能を融合してより包括的な融合機能表現を取得するための適応学習のための学習機能融合(LF2)フレームワークを提案します。具体的には、最初にソースドメイン内でモデルを事前トレーニングし、次に教師と生徒のトレーニング戦略に基づいて、ラベルのないターゲットドメインでモデルを微調整します。平均均等化教師ネットワークはグローバル機能をエンコードするように設計されていますが、各反復で更新される学生ネットワークはきめ細かいローカル機能を担当します。これらのマルチビュー機能を融合することにより、マルチレベルクラスタリングを採用して多様な疑似ラベルを生成します。特に、複数の疑似ラベルのあいまいな学習を回避するために、グローバル機能内のきめ細かいローカル情報を際立たせるための学習可能なFusion Module(FM)も提案されています。実験によると、提案されたLF2フレームワークは、DukeMTMC-ReIDに対してMarket1501で73.5%mAPおよび83.7%Rank1で最先端を上回り、Market1501に対してDukeMTMC-ReIDで83.2%mAPおよび92.8%Rank1を達成します。
Unsupervised domain adaptive (UDA) person re-identification (ReID) has gained increasing attention for its effectiveness on the target domain without manual annotations. Most fine-tuning based UDA person ReID methods focus on encoding global features for pseudo labels generation, neglecting the local feature that can provide for the fine-grained information. To handle this issue, we propose a Learning Feature Fusion (LF2) framework for adaptively learning to fuse global and local features to obtain a more comprehensive fusion feature representation. Specifically, we first pre-train our model within a source domain, then fine-tune the model on unlabeled target domain based on the teacher-student training strategy. The average weighting teacher network is designed to encode global features, while the student network updating at each iteration is responsible for fine-grained local features. By fusing these multi-view features, multi-level clustering is adopted to generate diverse pseudo labels. In particular, a learnable Fusion Module (FM) for giving prominence to fine-grained local information within the global feature is also proposed to avoid obscure learning of multiple pseudo labels. Experiments show that our proposed LF2 framework outperforms the state-of-the-art with 73.5% mAP and 83.7% Rank1 on Market1501 to DukeMTMC-ReID, and achieves 83.2% mAP and 92.8% Rank1 on DukeMTMC-ReID to Market1501.
updated: Thu May 19 2022 12:04:21 GMT+0000 (UTC)
published: Thu May 19 2022 12:04:21 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト