arXiv reaDer
OH-旧:個人の再識別のための全関係高次トランスフォーマー
OH-Former: Omni-Relational High-Order Transformer for Person Re-Identification
トランスフォーマーは、多くの視覚タスクで好ましいパフォーマンスを示しています。ただし、人の再識別(ReID)のタスクでは、バニラトランスフォーマーは、高次の特徴関係に関する豊富なコンテキストを十分に活用せず、歩行者の劇的な変化のために不十分なローカル特徴の詳細を劣化させます。この作業では、ReIDのオムニリレーショナル機能をモデル化するためのオムニリレーショナル高次トランスフォーマー(OH-Former)を提案します。まず、視覚的表現の能力を強化するために、各空間位置でクエリと分離キーのペアに基づいて注意マトリックスを取得する代わりに、非ローカルメカニズムの高次統計情報をモデル化するための一歩を踏み出します。計算コストを削減するために、各次数の対応するレイヤーの注意の重みを以前の混合メカニズムと共有します。次に、畳み込みベースの局所関係知覚モジュールを提案して、局所関係および2D位置情報を抽出する。私たちのモデルの実験結果は非常に有望であり、Market-1501、DukeMTMC、MSMT17、およびOccluded-Dukeデータセットで最先端のパフォーマンスを示しています。
Transformers have shown preferable performance on many vision tasks. However, for the task of person re-identification (ReID), vanilla transformers leave the rich contexts on high-order feature relations under-exploited and deteriorate local feature details, which are insufficient due to the dramatic variations of pedestrians. In this work, we propose an Omni-Relational High-Order Transformer (OH-Former) to model omni-relational features for ReID. First, to strengthen the capacity of visual representation, instead of obtaining the attention matrix based on pairs of queries and isolated keys at each spatial location, we take a step further to model high-order statistics information for the non-local mechanism. We share the attention weights in the corresponding layer of each order with a prior mixing mechanism to reduce the computation cost. Then, a convolution-based local relation perception module is proposed to extract the local relations and 2D position information. The experimental results of our model are superior promising, which show state-of-the-art performance on Market-1501, DukeMTMC, MSMT17 and Occluded-Duke datasets.
updated: Wed Nov 24 2021 07:56:32 GMT+0000 (UTC)
published: Thu Sep 23 2021 06:11:38 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト