arXiv reaDer
ByteTrack:すべての検出ボックスを関連付けることによるマルチオブジェクト追跡
ByteTrack: Multi-Object Tracking by Associating Every Detection Box
マルチオブジェクトトラッキング(MOT)は、ビデオ内のオブジェクトの境界ボックスとIDを推定することを目的としています。ほとんどの方法は、スコアがしきい値よりも高い検出ボックスを関連付けることによってIDを取得します。検出スコアが低いオブジェクト、たとえば閉塞されたオブジェクトは、単に捨てられます。これにより、無視できない真のオブジェクトが欠落し、軌道が断片化されます。この問題を解決するために、ハイスコアボックスだけでなく、ほぼすべての検出ボックスを関連付けることによって追跡する、シンプルで効果的かつ一般的な関連付け方法を紹介します。低スコアの検出ボックスについては、トラックレットとの類似性を利用して、真のオブジェクトを復元し、バックグラウンド検出を除外します。 9つの異なる最先端のトラッカーに適用すると、私たちの方法は1から10ポイントの範囲のIDF1スコアの一貫した改善を達成します。 MOTの最先端のパフォーマンスを実現するために、ByteTrackという名前のシンプルで強力なトラッカーを設計します。初めて、単一のV100GPUで30FPSの実行速度でMOT17のテストセットで80.3MOTA、77.3 IDF1、および63.1HOTAを達成しました。 ByteTrackは、MOT20、HiEve、およびBDD100Kの追跡ベンチマークでも最先端のパフォーマンスを実現します。ソースコード、デプロイバージョンを含む事前トレーニング済みモデル、および他のトラッカーに適用するためのチュートリアルは、https://github.com/ifzhang/ByteTrackでリリースされています。
Multi-object tracking (MOT) aims at estimating bounding boxes and identities of objects in videos. Most methods obtain identities by associating detection boxes whose scores are higher than a threshold. The objects with low detection scores, e.g. occluded objects, are simply thrown away, which brings non-negligible true object missing and fragmented trajectories. To solve this problem, we present a simple, effective and generic association method, tracking by associating almost every detection box instead of only the high score ones. For the low score detection boxes, we utilize their similarities with tracklets to recover true objects and filter out the background detections. When applied to 9 different state-of-the-art trackers, our method achieves consistent improvement on IDF1 score ranging from 1 to 10 points. To put forwards the state-of-the-art performance of MOT, we design a simple and strong tracker, named ByteTrack. For the first time, we achieve 80.3 MOTA, 77.3 IDF1 and 63.1 HOTA on the test set of MOT17 with 30 FPS running speed on a single V100 GPU. ByteTrack also achieves state-of-the-art performance on MOT20, HiEve and BDD100K tracking benchmarks. The source code, pre-trained models with deploy versions and tutorials of applying to other trackers are released at https://github.com/ifzhang/ByteTrack.
updated: Thu Apr 07 2022 16:36:24 GMT+0000 (UTC)
published: Wed Oct 13 2021 17:01:26 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト