arXiv reaDer
エンド ツー エンドの人検索用の Sequential Transformer
Sequential Transformer for End-to-End Person Search
Person Search は、写実的でトリミングされていないギャラリー画像から対象人物を同時にローカライズして認識することを目的としています。人物検索の大きな課題の 1 つは、2 つのサブタスクの相反する目標から生じます。つまり、人物検出は背景から人物を区別するためにすべての人物の共通性を見つけることに焦点を当て、人物の再識別 (再 ID) は焦点を当てます。さまざまな人の違いについて。この論文では、この課題に対処するために、エンドツーエンドの人物検索のための新しい Sequential Transformer (SeqTR) を提案します。当社の SeqTR には、検出トランスフォーマーと、検出タスクと再 ID タスクに順次対処する新しい再 ID トランスフォーマーが含まれています。 re-ID トランスフォーマーは、コンテキスト情報を利用する自己注意層と、人体の局所的な細粒度識別機能を学習する相互注意層で構成されます。さらに、re-ID トランスフォーマーはマルチスケール機能によって共有および監視され、学習者表現の堅牢性が向上します。広く使用されている 2 つの人物検索ベンチマークである CUHK-SYSU と PRW での広範な実験では、提案された SeqTR が PRW で 59.3% の mAP という既存のすべての人物検索方法よりも優れているだけでなく、現状と同等のパフォーマンスを達成することが示されています。 art は、CUHK-SYSU で 94.8% の mAP を達成しました。
Person Search aims to simultaneously localize and recognize a target person from realistic and uncropped gallery images. One major challenge of person search comes from the contradictory goals of the two sub-tasks, i.e., person detection focuses on finding the commonness of all persons so as to distinguish persons from the background, while person re-identification (re-ID) focuses on the differences among different persons. In this paper, we propose a novel Sequential Transformer (SeqTR) for end-to-end person search to deal with this challenge. Our SeqTR contains a detection transformer and a novel re-ID transformer that sequentially addresses detection and re-ID tasks. The re-ID transformer comprises the self-attention layer that utilizes contextual information and the cross-attention layer that learns local fine-grained discriminative features of the human body. Moreover, the re-ID transformer is shared and supervised by multi-scale features to improve the robustness of learned person representations. Extensive experiments on two widely-used person search benchmarks, CUHK-SYSU and PRW, show that our proposed SeqTR not only outperforms all existing person search methods with a 59.3% mAP on PRW but also achieves comparable performance to the state-of-the-art results with an mAP of 94.8% on CUHK-SYSU.
updated: Sun Nov 06 2022 09:32:30 GMT+0000 (UTC)
published: Sun Nov 06 2022 09:32:30 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト