arXiv reaDer
ByteTrack: すべての検出ボックスを関連付けることによるマルチオブジェクト・トラッキング
ByteTrack: Multi-Object Tracking by Associating Every Detection Box
マルチ・オブジェクト・トラッキング(MOT)は、動画内のオブジェクトのバウンディング・ボックスとアイデンティティを推定することを目的とする。多くの手法では、スコアがしきい値よりも高い検出ボックスを関連付けることでアイデンティティを得ている。しかし、検出ボックスのスコアが低いオブジェクト、例えば隠蔽されたオブジェクトは単純に捨てられてしまうため、真のオブジェクトの消失や軌道の断片化が少なくない。この問題を解決するために、我々はBYTEと呼ばれるシンプルで効果的かつ汎用的な関連付け方法を提示する。BYTEとは、高スコアの検出ボックスだけでなく、すべての検出ボックスを関連付けて追跡する方法である。低スコアの検出ボックスに対しては,トラックレットとの類似性を利用して真のオブジェクトを復元し、背景検出をフィルター除去する。BYTEを9つの異なる最先端のトラッカーに適用したところ、IDF1スコアを1~10ポイントの範囲で一貫して改善することができた。MOTの最先端の性能を活かすために、ByteTrackと名付けられたシンプルで強力なトラッカーを設計した。その結果、テストセットMOT17においてMOTA80.3、IDF1 77.3、HOTA63.1を達成し、V100 GPUで30 FPSの動作速度を実現した。ソースコード、事前学習済みモデル、デプロイバージョン、他のトラッカーへの適用に関するチュートリアルは、 で公開している。
Multi-object tracking (MOT) aims at estimating bounding boxes and identities of objects in videos. Most methods obtain identities by associating detection boxes whose scores are higher than a threshold. The objects with low detection scores, e.g. occluded objects, are simply thrown away, which brings non-negligible true object missing and fragmented trajectories. To solve this problem, we present a simple, effective and generic association method, called BYTE, tracking BY associaTing Every detection box instead of only the high score ones. For the low score detection boxes, we utilize their similarities with tracklets to recover true objects and filter out the background detections. We apply BYTE to 9 different state-of-the-art trackers and achieve consistent improvement on IDF1 score ranging from 1 to 10 points. To put forwards the state-of-the-art performance of MOT, we design a simple and strong tracker, named ByteTrack. For the first time, we achieve 80.3 MOTA, 77.3 IDF1 and 63.1 HOTA on the test set of MOT17 with 30 FPS running speed on a single V100 GPU. The source code, pre-trained models with deploy versions and tutorials of applying to other trackers are released at
updated: Thu Oct 14 2021 14:07:10 GMT+0000 (UTC)
published: Wed Oct 13 2021 17:01:26 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト