arXiv reaDer
Online Multiple Pedestrians Tracking using Deep Temporal Appearance Matching Association
オンラインのマルチターゲット追跡では、歩行者の視覚シーン間の外観と幾何学的類似性のモデリングが非常に重要です。幾何学的モデルと比較して、外観モデルの固有情報の次元が高いことは、多くの点で問題があります。しかし、最近の深層学習ベースの方法の成功により、高次元の外観情報の処理が可能になりました。多くのディープニューラルネットワークの中で、三重項損失のあるシャムネットワークが効果的な外観特徴抽出器として広く採用されています。シャムネットワークは各入力の特徴を個別に抽出できるため、ターゲット固有の特徴を更新および維持できます。ただし、他の入力との比較が必要なマルチターゲット設定には適していません。この問題に対処するために、我々は共同推論ネットワークに基づく新しいトラック外観モデルを提案する。提案された方法は、適応外観モデリングに使用される2つの入力の比較を可能にし、ターゲットと観測のマッチングの明確化とアイデンティティの一貫性の強化に貢献します。多様な実験結果は、私たちの方法の有効性をサポートしています。私たちの作品は、CVPR2019で開催されたBMTT MOTChallenge2019で3番目に優れたトラッカーとして認められました。コードはで入手できます。
In online multi-target tracking, modeling of appearance and geometric similarities between pedestrians visual scenes is of great importance. The higher dimension of inherent information in the appearance model compared to the geometric model is problematic in many ways. However, due to the recent success of deep-learning-based methods, handling of high-dimensional appearance information becomes feasible. Among many deep neural networks, Siamese network with triplet loss has been widely adopted as an effective appearance feature extractor. Since the Siamese network can extract the features of each input independently, one can update and maintain target-specific features. However, it is not suitable for multi-target settings that require comparison with other inputs. To address this issue, we propose a novel track appearance model based on the joint-inference network. The proposed method enables a comparison of two inputs to be used for adaptive appearance modeling and contributes to the disambiguation of target-observation matching and to the consolidation of identity consistency. Diverse experimental results support the effectiveness of our method. Our work was recognized as the 3rd-best tracker in BMTT MOTChallenge 2019, held at CVPR2019. The code is available at
updated: Fri Oct 09 2020 14:32:42 GMT+0000 (UTC)
published: Mon Jul 01 2019 14:44:41 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト