arXiv reaDer
オブジェクトの再識別のためのデュアルクラスター対照学習
Dual Cluster Contrastive learning for Object Re-Identification
最近、クラスター対照学習は、個々の機能とクラスターメモリ間の対照損失を計算することにより、オブジェクトReIDに効果的であることが証明されています。ただし、個々の機能を使用してクラスターメモリを勢いよく更新する既存の方法は、特に外れ値のサンプルの場合、トレーニング例によって変動します。個人ベースの更新メカニズムとは異なり、各クラスターの平均機能を適用してクラスターメモリを更新するセントロイドベースの更新メカニズムは、個々のサンプルの影響を減らすことができます。したがって、個人ベースの更新メカニズムとセントロイドベースの更新メカニズムを、個人とセントロイドクラスターのメモリバンクの2種類のメモリバンクを維持するデュアルクラスター対照フレームワーク(DCC)という名前の統合クラスター対照フレームワークで定式化します。重要なことに、個々のクラスターメモリは、一度に1人の個人だけを考慮して、更新のための1つのステップを実行します。セントロイドクラスターメモリは、各クラスターの平均機能を適用して、対応するクラスターメモリを更新します。最適化中に、各メモリのバリナ対照損失に加えて、クロスビュー整合性制約が適用され、オブジェクトReIDの識別記述を生成するための2つのメモリの利点が交換されます。 DCCは、グラウンドトゥルースラベルまたは生成された疑似ラベルを使用することにより、教師なしまたは教師なしオブジェクトのReIDに簡単に適用できることに注意してください。監視対象のObjectReIDと監視対象外のObjectReIDの下で、Market-1501、MSMT17、VeRi-776などの3つのベンチマークに関する広範な実験により、提案されたDCCの優位性が実証されています。
Recently, cluster contrastive learning has been proven effective for object ReID by computing the contrastive loss between the individual features and the cluster memory. However, existing methods that use the individual features to momentum update the cluster memory will fluctuate over the training examples, especially for the outlier samples. Unlike the individual-based updating mechanism, the centroid-based updating mechanism that applies the mean feature of each cluster to update the cluster memory can reduce the impact of individual samples. Therefore, we formulate the individual-based updating and centroid-based updating mechanisms in a unified cluster contrastive framework, named Dual Cluster Contrastive framework (DCC), which maintains two types of memory banks: individual and centroid cluster memory banks. Significantly, the individual cluster memory considers just one individual at a time to take a single step for updating. The centroid cluster memory applies the mean feature of each cluster to update the corresponding cluster memory. During optimization, besides the vallina contrastive loss of each memory, a cross-view consistency constraint is applied to exchange the benefits of two memories for generating a discriminative description for the object ReID. Note that DCC can be easily applied for unsupervised or supervised object ReID by using ground-truth labels or the generated pseudo-labels. Extensive experiments on three benchmarks, e.g., Market-1501, MSMT17, and VeRi-776, under supervised Object ReID and unsupervised Object ReID demonstrate the superiority of the proposed DCC.
updated: Thu Apr 21 2022 09:09:42 GMT+0000 (UTC)
published: Thu Dec 09 2021 02:43:25 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト