人物の再識別 (Re-ID) は、古典的なコンピューター ビジョン タスクであり、これまでのところ大きな進歩を遂げています。最近、着替えを伴う長期Re-IDが注目されています。ただし、既存の方法は主に画像ベースの設定に焦点を当てており、より豊富な時間情報が見落とされています。この論文では、あまり研究されていない、着替えのビデオベースの人物再識別(CCVReID)の比較的新しいが実用的な問題に焦点を当てます。この問題を体系的に研究するために、衣服の不一致の問題と、人物の再認識の問題に対するビデオ シーケンスに含まれる時間情報を同時に検討します。これに基づいて、CCVReID 問題を処理するための 2 ブランチの信頼性を意識した再ランキング フレームワークを開発します。提案されたフレームワークは、信頼性に基づく再ランキング戦略を通じて、古典的な外観の特徴と布のない歩行の特徴の両方を考慮する 2 つの分岐を統合します。このメソッドは、さらなる研究のためのベースライン メソッドを提供します。また、大規模な合成ビデオ データセットと現実世界のビデオ データセットを含む、CCVReID 問題の 2 つの新しいベンチマーク データセットを構築します。どちらも、さまざまな着替えを伴う人間のシーケンスを含みます。本作のベンチマークとコードを公開します。
Person re-identification (Re-ID) is a classical computer vision task and has achieved great progress so far. Recently, long-term Re-ID with clothes-changing has attracted increasing attention. However, existing methods mainly focus on image-based setting, where richer temporal information is overlooked. In this paper, we focus on the relatively new yet practical problem of clothes-changing video-based person re-identification (CCVReID), which is less studied. We systematically study this problem by simultaneously considering the challenge of the clothes inconsistency issue and the temporal information contained in the video sequence for the person Re-ID problem. Based on this, we develop a two-branch confidence-aware re-ranking framework for handling the CCVReID problem. The proposed framework integrates two branches that consider both the classical appearance features and cloth-free gait features through a confidence-guided re-ranking strategy. This method provides the baseline method for further studies. Also, we build two new benchmark datasets for CCVReID problem, including a large-scale synthetic video dataset and a real-world one, both containing human sequences with various clothing changes. We will release the benchmark and code in this work to the public.