arXiv reaDer
教師なし車両再識別のためのトリプレット対照表現学習
Triplet Contrastive Representation Learning for Unsupervised Vehicle Re-identification
部品の特徴の学習は、車両の再識別におけるきめの細かいセマンティックな理解に不可欠です。ただし、既存のアプローチはパーツの特徴とグローバルな特徴を直接モデル化するため、特徴情報が等しくなく、監視されていない車両の再識別のための信頼性の低い疑似ラベルが原因で、深刻な勾配消失の問題に簡単につながる可能性があります。この問題に対処するために、このホワイト ペーパーでは、教師なし車両の再識別のために、クラスター機能を活用してパーツ機能とグローバル機能を橋渡しする単純なトリプレット対照表現学習 (TCRL) フレームワークを提案します。具体的には、TCRL は、インスタンス/クラスターの特徴を格納する 3 つのメモリ バンクを考案し、隣接するメモリ バンク間で対照的な学習を行う Proxy Contrastive Loss (PCL) を提案することで、パーツとグローバルな特徴の間の関連付けをパーツ クラスターの遷移として提示します。およびクラスターとグローバルの関連付け。クラスタ メモリ バンクはすべての車両機能に対応しているため、それらを識別可能な機能表現にまとめることができます。インスタンス/クラスター情報を深く活用するために、TCRL は 2 つの追加の損失関数を提案しています。インスタンス レベルの機能については、Hybrid Contrastive Loss (HCL) は、正のインスタンス機能に近づき、すべての負のインスタンス機能を押しのけることによって、サンプル相関を再定義します。クラスター レベルの機能の場合、Weighted Regularization Cluster Contrastive Loss (WRCCL) は、インスタンスの類似性に従って誤ってラベル付けされた画像にペナルティを課すことにより、疑似ラベルを改良します。広範な実験により、TCRL は多くの最先端の教師なし車両再識別アプローチよりも優れていることが示されています。
Part feature learning is critical for fine-grained semantic understanding in vehicle re-identification. However, existing approaches directly model part features and global features, which can easily lead to serious gradient vanishing issues due to their unequal feature information and unreliable pseudo-labels for unsupervised vehicle re-identification. To address this problem, in this paper, we propose a simple Triplet Contrastive Representation Learning (TCRL) framework which leverages cluster features to bridge the part features and global features for unsupervised vehicle re-identification. Specifically, TCRL devises three memory banks to store the instance/cluster features and proposes a Proxy Contrastive Loss (PCL) to make contrastive learning between adjacent memory banks, thus presenting the associations between the part and global features as a transition of the part-cluster and cluster-global associations. Since the cluster memory bank copes with all the vehicle features, it can summarize them into a discriminative feature representation. To deeply exploit the instance/cluster information, TCRL proposes two additional loss functions. For the instance-level feature, a Hybrid Contrastive Loss (HCL) re-defines the sample correlations by approaching the positive instance features and pushing the all negative instance features away. For the cluster-level feature, a Weighted Regularization Cluster Contrastive Loss (WRCCL) refines the pseudo labels by penalizing the mislabeled images according to the instance similarity. Extensive experiments show that TCRL outperforms many state-of-the-art unsupervised vehicle re-identification approaches.
updated: Thu Mar 16 2023 01:51:00 GMT+0000 (UTC)
published: Mon Jan 23 2023 15:52:12 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト