この論文では、メタデータ支援再識別(MA-ReID)と軌道ベースのカメラリンクモデル(TCLM)に基づく車両のマルチターゲットマルチカメラトラッキング(MTMCT)の新しいフレームワークを提案します。ビデオシーケンスと対応するフレームごとの車両検出を前提として、まず、提案されたトラフィック認識シングルカメラトラッキング(TSCT)によって、シングルカメラトラッキング(SCT)から分離されたトラックレットの問題に対処します。次に、TCLMを自動的に構築した後、MA-ReIDによってMTMCTを解決します。 TCLMは、カメラのトポロジ構成から生成され、空間的および時間的情報を取得して、ReIDの候補検索を減らすことでMTMCTのパフォーマンスを向上させます。また、時間的注意モデルを使用して、各カメラからの軌跡のより識別力のある埋め込みを作成し、車両ReIDの堅牢な距離測定を実現します。さらに、MTMCTのメタデータ分類子をトレーニングして、一時的な注意に基づく埋め込みと連結されたメタデータ機能を取得します。最後に、TCLMと階層的クラスタリングが共同でグローバルIDの割り当てに適用されます。提案された方法はCityFlowデータセットで評価され、最先端のMTMCT方法を上回るIDF1 76.77%を達成します。
In this paper, we propose a novel framework for multi-target multi-camera tracking (MTMCT) of vehicles based on metadata-aided re-identification (MA-ReID) and the trajectory-based camera link model (TCLM). Given a video sequence and the corresponding frame-by-frame vehicle detections, we first address the isolated tracklets issue from single camera tracking (SCT) by the proposed traffic-aware single-camera tracking (TSCT). Then, after automatically constructing the TCLM, we solve MTMCT by the MA-ReID. The TCLM is generated from camera topological configuration to obtain the spatial and temporal information to improve the performance of MTMCT by reducing the candidate search of ReID. We also use the temporal attention model to create more discriminative embeddings of trajectories from each camera to achieve robust distance measures for vehicle ReID. Moreover, we train a metadata classifier for MTMCT to obtain the metadata feature, which is concatenated with the temporal attention based embeddings. Finally, the TCLM and hierarchical clustering are jointly applied for global ID assignment. The proposed method is evaluated on the CityFlow dataset, achieving IDF1 76.77%, which outperforms the state-of-the-art MTMCT methods.