arXiv reaDer
Neighborhood Consensus Contrastive Learning for Backward-Compatible Representation
オブジェクト再識別(ReID)では、深層学習手法の開発には、モデルの更新と展開が含まれることがよくあります。新しいモデルを展開するときに、大規模なギャラリーの画像の特徴を再抽出することは耐えられません。したがって、下位互換性のある表現を提案して、「古い」機能と互換性のある「新しい」機能を、再抽出プロセスなしで有効にします。既存の下位互換性のある方法は、埋め込みスペースまたは識別スペースで制約を実行し、古い埋め込みのクラス内分散を無視するだけであるため、新しい埋め込みの識別可能性を損なうリスクがあります。この作業では、埋め込み構造と識別知識の両方を使用して、近隣コンセンサスの観点から下位互換性のある表現を学習する近隣コンセンサス対照学習(NCCL)メソッドを提案します。 NCCLを使用すると、マルチクラスタービューで、新しい埋め込みが古い埋め込みと連携して改善されます。さらに、信頼性の低い古い埋め込みをフィルタリングするスキームも提案します。これにより、互換性の堅牢性をさらに向上させることができます。私たちの方法は、新しいモデルの精度を損なうことなく、下位互換性を保証します。また、ほとんどのシナリオで新しいモデルの精度を向上させることもできます。
In object re-identification (ReID), the development of deep learning techniques often involves model update and deployment. It is unbearable to re-extract image features of the large-scale gallery when deploying new models. Therefore, backward-compatible representation is proposed to enable the "new" features compatible with "old"' features, free from the re-extracting process. The existing backward-compatible methods simply conduct constraints in the embedding space or discriminative space and ignore the intra-class variance of the old embeddings, resulting in a risk of damaging the discriminability of new embeddings. In this work, we propose a Neighborhood Consensus Contrastive Learning (NCCL) method, which learns backward-compatible representation from a neighborhood consensus perspective with both embedding structures and discriminative knowledge. With NCCL, the new embeddings are aligned and improved with old embeddings in a multi-cluster view. Besides, we also propose a scheme to filter the old embeddings with low credibility, which can further improve the compatibility robustness. Our method ensures backward compatibility without impairing the accuracy of the new model. And it can even improve the new model's accuracy in most scenarios.
updated: Sat Aug 07 2021 05:50:47 GMT+0000 (UTC)
published: Sat Aug 07 2021 05:50:47 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト