データの関連付けは、検出による追跡パラダイムに従う任意の複数オブジェクト追跡 (MOT) メソッドにとって重要なコンポーネントです。完全な軌道を生成するために、このような方法では、データ関連付けプロセスを使用して、各タイムステップ中に検出と既存のターゲットの間の割り当てを確立します。最近のデータ関連付けアプローチは、多次元線形割り当てタスクまたはネットワーク フロー最小化問題を解決しようとするか、複数の仮説追跡を介してそれに取り組みます。ただし、推論中には、シーケンス フレームごとに最適な割り当てを計算する最適化ステップが必要であり、任意のソリューションで計算が大幅に複雑になります。この目的のために、この作業のコンテキストで、推論中に明示的な最適化を必要とせずにデータ関連付けに取り組む Transformer ベースの代入決定ネットワーク (TADN) を紹介します。特に、TADN は、ネットワークの単一の転送パスで、検出とアクティブなターゲットの間の割り当てペアを直接推測できます。かなり単純なMOTフレームワークにTADNを統合し、効率的なエンドツーエンドのトレーニングのための新しいトレーニング戦略を設計し、2つの一般的なベンチマーク、すなわちMOT17とUA-DETRAC。私たちが提案するアプローチは、オクルージョン処理や再識別などの重要な補助コンポーネントを欠くトラッカーとしての単純な性質にもかかわらず、ほとんどの評価指標で最先端を上回っています。メソッドの実装は、https://github.com/psaltaath/tadn-mot で公開されています。
Data association is a crucial component for any multiple object tracking (MOT) method that follows the tracking-by-detection paradigm. To generate complete trajectories such methods employ a data association process to establish assignments between detections and existing targets during each timestep. Recent data association approaches try to solve a multi-dimensional linear assignment task or a network flow minimization problem or either tackle it via multiple hypotheses tracking. However, during inference an optimization step that computes optimal assignments is required for every sequence frame adding significant computational complexity in any given solution. To this end, in the context of this work we introduce Transformer-based Assignment Decision Network (TADN) that tackles data association without the need of any explicit optimization during inference. In particular, TADN can directly infer assignment pairs between detections and active targets in a single forward pass of the network. We have integrated TADN in a rather simple MOT framework, we designed a novel training strategy for efficient end-to-end training and demonstrate the high potential of our approach for online visual tracking-by-detection MOT on two popular benchmarks, i.e. MOT17 and UA-DETRAC. Our proposed approach outperforms the state-of-the-art in most evaluation metrics despite its simple nature as a tracker which lacks significant auxiliary components such as occlusion handling or re-identification. The implementation of our method is publicly available at https://github.com/psaltaath/tadn-mot.