arXiv reaDer
プロトタイプへの投影の観点から人物の再識別を再考する
Rethinking Person Re-identification from a Projection-on-Prototypes Perspective
検索タスクとしての個人再識別 (Re-ID) は、過去 10 年間で驚異的な発展を遂げました。既存の最先端の手法は、同様のフレームワークに従って、まず入力画像から特徴を抽出し、次に分類子を使用してそれらを分類します。ただし、トレーニング セットとテスト セットの間には同一性の重複がないため、多くの場合、分類器は推論中に破棄されます。抽出された特徴のみが、距離メトリックによる人物の検索に使用されます。この論文では、個人 Re-ID における分類器の役割を再考し、画像特徴からクラス プロトタイプへの投影として分類器を考えるという新しい視点を提唱します。これらのプロトタイプは、まさに分類器の学習されたパラメーターです。この観点から、入力画像のアイデンティティをすべてのプロトタイプとの類似性として記述し、これを人物の再識別を実行するためのより識別的な特徴として利用します。これにより、推論段階で分類器の機能を革新的に確保する新しいベースライン ProNet を提案します。クラス プロトタイプの学習を容易にするために、三重項損失と恒等分類損失の両方が、分類器による射影を受ける特徴に適用されます。 ProNet++ の改良版は、さらに複数の粒度の設計を組み込むことによって提供されます。 4 つのベンチマークの実験により、私たちが提案した ProNet はシンプルでありながら効果的であり、以前のベースラインを大幅に上回っていることが実証されました。また、ProNet++ は、トランスベースの競合他社と競合するか、それ以上の結果を達成します。
Person Re-IDentification (Re-ID) as a retrieval task, has achieved tremendous development over the past decade. Existing state-of-the-art methods follow an analogous framework to first extract features from the input images and then categorize them with a classifier. However, since there is no identity overlap between training and testing sets, the classifier is often discarded during inference. Only the extracted features are used for person retrieval via distance metrics. In this paper, we rethink the role of the classifier in person Re-ID, and advocate a new perspective to conceive the classifier as a projection from image features to class prototypes. These prototypes are exactly the learned parameters of the classifier. In this light, we describe the identity of input images as similarities to all prototypes, which are then utilized as more discriminative features to perform person Re-ID. We thereby propose a new baseline ProNet, which innovatively reserves the function of the classifier at the inference stage. To facilitate the learning of class prototypes, both triplet loss and identity classification loss are applied to features that undergo the projection by the classifier. An improved version of ProNet++ is presented by further incorporating multi-granularity designs. Experiments on four benchmarks demonstrate that our proposed ProNet is simple yet effective, and significantly beats previous baselines. ProNet++ also achieves competitive or even better results than transformer-based competitors.
updated: Mon Aug 21 2023 13:38:10 GMT+0000 (UTC)
published: Mon Aug 21 2023 13:38:10 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト