arXiv reaDer
デュアルリファインメント:教師なしドメイン適応型人物再識別のための共同ラベルと機能のリファインメント
Dual-Refinement: Joint Label and Feature Refinement for Unsupervised Domain Adaptive Person Re-Identification
教師なしドメイン適応(UDA)の個人の再識別(re-ID)は、ターゲットドメインデータのラベルがないため、困難な作業です。この問題を処理するために、最近のいくつかの研究では、クラスタリングアルゴリズムを採用して、疑似ラベルをオフラインで生成します。これは、ターゲットドメインでのオンライン特徴学習の監視信号として使用できます。ただし、オフラインで生成されたラベルには多くのノイズが含まれていることが多く、オンラインで学習された特徴の識別が大幅に妨げられるため、最終的なUDAre-IDのパフォーマンスが制限されます。この目的のために、我々は、デュアルリファインメントと呼ばれる新しいアプローチを提案します。これは、オフラインクラスタリングフェーズで疑似ラベルを、オンライントレーニングフェーズで機能を共同でリファインし、ターゲットドメインでのラベルの純度と機能の識別可能性を交互に高めます。より信頼性の高い再IDのために。具体的には、オフラインフェーズで、すべての粗いクラスターの代表的なプロトタイプを選択する新しい階層的クラスタリングスキームが提案されます。したがって、人物画像に固有の階層情報を使用することにより、ラベルを効果的に絞り込むことができます。さらに、オンラインフェーズでは、インスタントメモリスプレッドアウト(IMスプレッドアウト)正則化を提案します。これは、提案されたインスタントメモリバンクを利用して、データセット全体のサンプルフィーチャを格納し、拡散フィーチャ学習を可能にします。トレーニングデータ全体を即座に。デュアルリファインメント手法は、ノイズの多いラベルの影響を減らし、代替トレーニングプロセス内で学習した特徴を洗練します。実験は、私たちの方法が最先端の方法を大幅に上回っていることを示しています。
Unsupervised domain adaptive (UDA) person re-identification (re-ID) is a challenging task due to the missing of labels for the target domain data. To handle this problem, some recent works adopt clustering algorithms to off-line generate pseudo labels, which can then be used as the supervision signal for on-line feature learning in the target domain. However, the off-line generated labels often contain lots of noise that significantly hinders the discriminability of the on-line learned features, and thus limits the final UDA re-ID performance. To this end, we propose a novel approach, called Dual-Refinement, that jointly refines pseudo labels at the off-line clustering phase and features at the on-line training phase, to alternatively boost the label purity and feature discriminability in the target domain for more reliable re-ID. Specifically, at the off-line phase, a new hierarchical clustering scheme is proposed, which selects representative prototypes for every coarse cluster. Thus, labels can be effectively refined by using the inherent hierarchical information of person images. Besides, at the on-line phase, we propose an instant memory spread-out (IM-spread-out) regularization, that takes advantage of the proposed instant memory bank to store sample features of the entire dataset and enable spread-out feature learning over the entire training data instantly. Our Dual-Refinement method reduces the influence of noisy labels and refines the learned features within the alternative training process. Experiments demonstrate that our method outperforms the state-of-the-art methods by a large margin.
updated: Sat Dec 26 2020 07:35:35 GMT+0000 (UTC)
published: Sat Dec 26 2020 07:35:35 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト