arXiv reaDer
ビデオベースの人物再識別のためのスイッチングとアグリゲーションを使用した特徴のもつれの解消学習
Feature Disentanglement Learning with Switching and Aggregation for Video-based Person Re-Identification
ビデオ人物の再識別 (Re-ID) では、ネットワークは連続するフレームから対象人物の特徴を一貫して抽出する必要があります。既存の方法は、時間情報の使用方法のみに焦点を当てる傾向があるため、ネットワークが似たような外観と同じ背景にだまされることがよくあります。この論文では、カメラの特性に基づいて ID を表す特徴と特徴を分離し、ID 情報により注意を払う Disentanglement and Switching and Aggregation Network (DSANet) を提案します。また、スイッチングとアグリゲーションによって作成された新しい機能のペアを利用して、さまざまなカメラ シナリオに対するネットワークの機能を向上させる補助タスクも紹介します。さらに、フレームフローに従ってターゲットの位置の変化に対してロバストな特徴を抽出するターゲット位置特定モジュール (TLM) と、時間情報を最終表現に反映するフレーム重み生成 (FWG) を考案します。もつれを解く学習のためのさまざまな損失関数は、ネットワークの各コンポーネントが独自の役割を十分に果たしながら協力できるように設計されています。大規模な実験から得られた定量的および定性的な結果は、3 つのベンチマーク データセットでの最先端の方法に対する DSANet の優位性を示しています。
In video person re-identification (Re-ID), the network must consistently extract features of the target person from successive frames. Existing methods tend to focus only on how to use temporal information, which often leads to networks being fooled by similar appearances and same backgrounds. In this paper, we propose a Disentanglement and Switching and Aggregation Network (DSANet), which segregates the features representing identity and features based on camera characteristics, and pays more attention to ID information. We also introduce an auxiliary task that utilizes a new pair of features created through switching and aggregation to increase the network's capability for various camera scenarios. Furthermore, we devise a Target Localization Module (TLM) that extracts robust features against a change in the position of the target according to the frame flow and a Frame Weight Generation (FWG) that reflects temporal information in the final representation. Various loss functions for disentanglement learning are designed so that each component of the network can cooperate while satisfactorily performing its own role. Quantitative and qualitative results from extensive experiments demonstrate the superiority of DSANet over state-of-the-art methods on three benchmark datasets.
updated: Fri Dec 16 2022 04:27:56 GMT+0000 (UTC)
published: Fri Dec 16 2022 04:27:56 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト