arXiv reaDer
詳細の悪魔:人の再識別における条件付き埋め込みのための視覚的手がかりの調整
Devil's in the Details: Aligning Visual Clues for Conditional Embedding in Person Re-Identification
人の再識別は目覚ましい進歩を遂げましたが、咬合、視点の変更、および同様の衣服などの困難なケースは依然として大きな課題をもたらします。全体的な視覚的特徴に加えて、詳細情報の照合と比較もこれらの課題に取り組むために不可欠です。本論文では、歩行者画像の詳細情報をより有効に活用するために、既存の方法のほとんどでは満たすことができない2つの重要な認識パターンを提案します。まず、Visual Clue Alignmentでは、モデルがペアワイズ比較のために2つの画像から決定的な領域ペアを選択して位置合わせする必要がありますが、既存の方法では、高い特徴の類似性や同じセマンティックラベルなどの事前定義されたルールでのみ領域を位置合わせします。次に、条件付き特徴の埋め込みでは、クエリ画像の全体的な特徴を、一致するギャラリー画像に基づいて動的に調整する必要がありますが、既存の方法のほとんどは参照画像を無視します。対応注意モジュールや不一致ベースのGCNを含む新しい手法を導入することにより、CACE-Net((C)lue(A)lignment and(C)と呼ばれる統合フレームワークに両方のパターンを統合するエンドツーエンドのReIDメソッドを提案します。 onditional(E)mbedding)。実験は、CACE-Netが3つの公開データセットで最先端のパフォーマンスを達成することを示しています。
Although Person Re-Identification has made impressive progress, difficult cases like occlusion, change of view-pointand similar clothing still bring great challenges. Besides overall visual features, matching and comparing detailed information is also essential for tackling these challenges. This paper proposes two key recognition patterns to better utilize the detail information of pedestrian images, that most of the existing methods are unable to satisfy. Firstly, Visual Clue Alignment requires the model to select and align decisive regions pairs from two images for pair-wise comparison, while existing methods only align regions with predefined rules like high feature similarity or same semantic labels. Secondly, the Conditional Feature Embedding requires the overall feature of a query image to be dynamically adjusted based on the gallery image it matches, while most of the existing methods ignore the reference images. By introducing novel techniques including correspondence attention module and discrepancy-based GCN, we propose an end-to-end ReID method that integrates both patterns into a unified framework, called CACE-Net((C)lue(A)lignment and (C)onditional (E)mbedding). The experiments show that CACE-Net achieves state-of-the-art performance on three public datasets.
updated: Mon Dec 07 2020 11:07:51 GMT+0000 (UTC)
published: Fri Sep 11 2020 06:28:56 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト