arXiv reaDer
可視赤外人物再識別のための形状消去特徴学習
Shape-Erased Feature Learning for Visible-Infrared Person Re-Identification
視覚的なあいまいさが高い可視画像と赤外線画像の間のモダリティ ギャップにより、可視赤外線人物再識別 (VI-ReID) のための多様なモダリティ共有セマンティック コンセプトを学習することは、依然として困難な問題です。体型は、VI-ReID の重要なモダリティ共有キューの 1 つです。より多様なモダリティ共有の手がかりを掘り下げるために、学習した特徴の体型関連のセマンティック概念を消去することで、ReID モデルがより多くの他のモダリティ共有特徴を抽出して識別できるようになると期待しています。この目的のために、2 つの直交部分空間でモダリティ共有機能を無相関化する形状消去機能学習パラダイムを提案します。 1 つの部分空間内の形状関連の特徴と直交補数内の形状消去された特徴を共同で学習することで、形状消去された特徴と身体形状情報を破棄するアイデンティティとの間の条件付き相互情報最大化が達成され、学習された表現の多様性が明示的に強化されます。 SYSU-MM01、RegDB、および HITSZ-VCM データセットに関する広範な実験により、この方法の有効性が実証されています。
Due to the modality gap between visible and infrared images with high visual ambiguity, learning diverse modality-shared semantic concepts for visible-infrared person re-identification (VI-ReID) remains a challenging problem. Body shape is one of the significant modality-shared cues for VI-ReID. To dig more diverse modality-shared cues, we expect that erasing body-shape-related semantic concepts in the learned features can force the ReID model to extract more and other modality-shared features for identification. To this end, we propose shape-erased feature learning paradigm that decorrelates modality-shared features in two orthogonal subspaces. Jointly learning shape-related feature in one subspace and shape-erased features in the orthogonal complement achieves a conditional mutual information maximization between shape-erased feature and identity discarding body shape information, thus enhancing the diversity of the learned representation explicitly. Extensive experiments on SYSU-MM01, RegDB, and HITSZ-VCM datasets demonstrate the effectiveness of our method.
updated: Sun Apr 09 2023 10:22:10 GMT+0000 (UTC)
published: Sun Apr 09 2023 10:22:10 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト