arXiv reaDer
StrongSORT: DeepSORT を再び素晴らしいものにする
StrongSORT: Make DeepSORT Great Again
近年、マルチオブジェクトトラッキング(MOT)が注目され、目覚ましい進歩を遂げています。ただし、既存の方法では、さまざまな基本モデル (検出器や埋め込みモデルなど) や、さまざまなトレーニングや推論のトリックなどを使用する傾向があります。その結果、公正な比較のための適切なベースラインの構築が不可欠です。このホワイト ペーパーでは、古典的なトラッカー、つまり DeepSORT を最初に再検討し、次にオブジェクト検出、特徴の埋め込み、軌跡の関連付けなどの複数の観点から大幅に改善します。提案されたトラッカーは、StrongSORT という名前で、MOT コミュニティに強力で公正なベースラインを提供します。さらに、2 つの軽量でプラグ アンド プレイのアルゴリズムは、MOT の 2 つの固有の「不足している」問題に対処するために提案されています: 関連付けの欠落と検出の欠落です。具体的には、短いトラックレットを高い計算の複雑さで完全な軌跡に関連付けるほとんどの方法とは異なり、外観情報なしでグローバルな関連付けを実行し、速度と精度のバランスを適切に達成するために、外観のないリンク モデル (AFLink) を提案します。さらに、ガウスプロセス回帰に基づくガウス平滑化補間(GSI)を提案して、検出の欠落を軽減します。 AFLink と GSI は、わずかな追加の計算コスト (MOT17 では、画像ごとにそれぞれ 1.7 ミリ秒と 7.1 ミリ秒) で、さまざまなトラッカーに簡単にプラグインできます。最後に、StrongSORT を AFLink および GSI と融合することにより、最終トラッカー (StrongSORT++) は複数の公開ベンチマーク (MOT17、MOT20、DanceTrack、および KITTI) で最先端の結果を達成します。コードは https://github.com/dyhBUPT/StrongSORT および https://github.com/open-mmlab/mmtracking で入手できます。
Recently, Multi-Object Tracking (MOT) has attracted rising attention, and accordingly, remarkable progresses have been achieved. However, the existing methods tend to use various basic models (e.g, detector and embedding model), and different training or inference tricks, etc. As a result, the construction of a good baseline for a fair comparison is essential. In this paper, a classic tracker, i.e., DeepSORT, is first revisited, and then is significantly improved from multiple perspectives such as object detection, feature embedding, and trajectory association. The proposed tracker, named StrongSORT, contributes a strong and fair baseline for the MOT community. Moreover, two lightweight and plug-and-play algorithms are proposed to address two inherent "missing" problems of MOT: missing association and missing detection. Specifically, unlike most methods, which associate short tracklets into complete trajectories at high computation complexity, we propose an appearance-free link model (AFLink) to perform global association without appearance information, and achieve a good balance between speed and accuracy. Furthermore, we propose a Gaussian-smoothed interpolation (GSI) based on Gaussian process regression to relieve the missing detection. AFLink and GSI can be easily plugged into various trackers with a negligible extra computational cost (1.7 ms and 7.1 ms per image, respectively, on MOT17). Finally, by fusing StrongSORT with AFLink and GSI, the final tracker (StrongSORT++) achieves state-of-the-art results on multiple public benchmarks, i.e., MOT17, MOT20, DanceTrack and KITTI. Codes are available at https://github.com/dyhBUPT/StrongSORT and https://github.com/open-mmlab/mmtracking.
updated: Wed Feb 22 2023 02:22:40 GMT+0000 (UTC)
published: Mon Feb 28 2022 02:37:19 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト