arXiv reaDer
Attend to the Difference: Cross-Modality Person Re-identification via Contrastive Correlation
クロスモダリティの人の再識別の問題は、その実用的な重要性のために、最近ますます注目を集めています。人間は通常、2つの類似したオブジェクトを比較するときに違いに注意を払うという事実に動機付けられて、固有の空間的制限を保持し、入力クロスモダリティ画像ペアの違いに注意を向けるデュアルパスクロスモダリティ特徴学習フレームワークを提案します。私たちのフレームワークは、デュアルパス空間構造保存共通空間ネットワーク(DSCSN)と対照相関ネットワーク(CCN)の2つの主要コンポーネントで構成されています。前者は空間構造を失うことなく共通の3Dテンソル空間にクロスモダリティ画像を埋め込み、後者は入力画像ペアを動的に比較することによって対照的な特徴を抽出します。入力RGB画像と赤外線画像に対して生成された表現は相互に依存していることに注意してください。 2つの公開されているRGB-IRReIDデータセット、SYSU-MM01とRegDBで広範な実験を行い、提案された方法は、完全な評価モードと単純化された評価モードの両方で、最先端のアルゴリズムを大幅に上回っています。
The problem of cross-modality person re-identification has been receiving increasing attention recently, due to its practical significance. Motivated by the fact that human usually attend to the difference when they compare two similar objects, we propose a dual-path cross-modality feature learning framework which preserves intrinsic spatial strictures and attends to the difference of input cross-modality image pairs. Our framework is composed by two main components: a Dual-path Spatial-structure-preserving Common Space Network (DSCSN) and a Contrastive Correlation Network (CCN). The former embeds cross-modality images into a common 3D tensor space without losing spatial structures, while the latter extracts contrastive features by dynamically comparing input image pairs. Note that the representations generated for the input RGB and Infrared images are mutually dependant to each other. We conduct extensive experiments on two public available RGB-IR ReID datasets, SYSU-MM01 and RegDB, and our proposed method outperforms state-of-the-art algorithms by a large margin with both full and simplified evaluation modes.
updated: Wed Dec 01 2021 17:40:36 GMT+0000 (UTC)
published: Fri Oct 25 2019 12:36:47 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト