重複していないカメラシステム全体で人々のグループを再識別または取得することを学ぶことは、ビデオ監視において重要なアプリケーションを持っています。ただし、ほとんどの既存の方法は、実際のシナリオでは人々がグループで歩くことが多いという事実を無視して、(単一の)個人の再識別(re-id)に焦点を合わせています。この作業では、さらに一歩進んで、人々のグループを識別するためのコンテキスト情報、つまりグループre-idの採用を検討します。グループベースのre-idタスク、つまりグループre-idとグループ認識者re-idに同時に対処するために、グラフニューラルネットワークに基づく新しい統合フレームワークを提案します。具体的には、グループメンバーをノードとしてコンテキストグラフを作成し、さまざまな人々の間の依存関係を活用します。マルチレベルの注意メカニズムは、グループ内とグループ間の両方のコンテキストを定式化するために開発され、ノードレベルの機能を注意深く集約することにより、堅牢なグラフレベルの表現のための追加の自己注意モジュールがあります。提案されたモデルは、ノードレベルの表現を使用して、グループを認識する人のre-idに取り組むために直接一般化することができます。一方、これらのタスクでの深層学習モデルの展開を容易にするために、既存のグループre-idデータセットよりも1桁大きい、1.5Kの注釈付きグループを持つ3.8Kを超える画像を含む新しいグループre-idデータセットを構築します。新規データセットと3つの既存のデータセットに関する広範な実験は、グループベースのre-idタスクの両方に対して提案されたフレームワークの有効性を明確に示しています。コードはhttps://github.com/daodaofr/group_reidで入手できます。
Learning to re-identify or retrieve a group of people across non-overlapped camera systems has important applications in video surveillance. However, most existing methods focus on (single) person re-identification (re-id), ignoring the fact that people often walk in groups in real scenarios. In this work, we take a step further and consider employing context information for identifying groups of people, i.e., group re-id. We propose a novel unified framework based on graph neural networks to simultaneously address the group-based re-id tasks, i.e., group re-id and group-aware person re-id. Specifically, we construct a context graph with group members as its nodes to exploit dependencies among different people. A multi-level attention mechanism is developed to formulate both intra-group and inter-group context, with an additional self-attention module for robust graph-level representations by attentively aggregating node-level features. The proposed model can be directly generalized to tackle group-aware person re-id using node-level representations. Meanwhile, to facilitate the deployment of deep learning models on these tasks, we build a new group re-id dataset that contains more than 3.8K images with 1.5K annotated groups, an order of magnitude larger than existing group re-id datasets. Extensive experiments on the novel dataset as well as three existing datasets clearly demonstrate the effectiveness of the proposed framework for both group-based re-id tasks. The code is available at https://github.com/daodaofr/group_reid.