arXiv reaDer
分割と接続:マルチオブジェクトトラッキング用のユニバーサルトラックレットブースター
Split and Connect: A Universal Tracklet Booster for Multi-Object Tracking
マルチオブジェクトトラッキング(MOT)は、コンピュータービジョンの分野で不可欠なタスクです。近年の深層学習技術の急速な発展により、MOTは大きな改善を達成しました。ただし、オクルージョンに対する感度、さまざまな照明条件下での不安定性、変形可能なオブジェクトに対する非ロバスト性など、いくつかの課題が残っています。既存のトラッカーのほとんどでこのような一般的な課題に対処するために、この論文では、トラックレットブースターアルゴリズムを提案します。 、他のトラッカー上に構築できます。動機は単純で単純です。潜在的なIDスイッチ位置でトラックレットを分割し、同じオブジェクトからのものである場合は複数のトラックレットを1つに接続します。言い換えると、トラックレットブースターは、スプリッターとコネクターの2つの部分で構成されています。まず、適応ガウスカーネルを使用したラベル平滑化戦略による分割位置予測に、時間的に拡張された畳み込みブロックがスタックされたアーキテクチャが採用されています。次に、マルチヘッドの自己注意ベースのエンコーダーがトラックレットの埋め込みに利用され、トラックレットをより大きなグループに接続するためにさらに使用されます。 MOT17およびMOT20ベンチマークデータセットで十分な実験を実施し、有望な結果を示しています。提案されたトラックレットブースターと組み合わせると、既存のトラッカーは通常、IDF1スコアを大幅に改善できます。これは、提案された方法の有効性を示しています。
Multi-object tracking (MOT) is an essential task in the computer vision field. With the fast development of deep learning technology in recent years, MOT has achieved great improvement. However, some challenges still remain, such as sensitiveness to occlusion, instability under different lighting conditions, non-robustness to deformable objects, etc. To address such common challenges in most of the existing trackers, in this paper, a tracklet booster algorithm is proposed, which can be built upon any other tracker. The motivation is simple and straightforward: split tracklets on potential ID-switch positions and then connect multiple tracklets into one if they are from the same object. In other words, the tracklet booster consists of two parts, i.e., Splitter and Connector. First, an architecture with stacked temporal dilated convolution blocks is employed for the splitting position prediction via label smoothing strategy with adaptive Gaussian kernels. Then, a multi-head self-attention based encoder is exploited for the tracklet embedding, which is further used to connect tracklets into larger groups. We conduct sufficient experiments on MOT17 and MOT20 benchmark datasets, which demonstrates promising results. Combined with the proposed tracklet booster, existing trackers usually can achieve large improvements on the IDF1 score, which shows the effectiveness of the proposed method.
updated: Thu May 06 2021 03:49:19 GMT+0000 (UTC)
published: Thu May 06 2021 03:49:19 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト