arXiv reaDer
もう1つのチェック:「偽の背景」を再度追跡する
One More Check: Making "Fake Background" Be Tracked Again
オブジェクト検出とID埋め込み抽出を統合ネットワークに統合するワンショットマルチオブジェクト追跡は、近年、画期的な結果を達成しています。ただし、現在のワンショットトラッカーは、候補の境界ボックスを予測するために単一フレームの検出のみに依存しています。これは、モーションブラー、オクルージョンなどの悲惨な視覚的劣化に直面した場合に信頼できない可能性があります。ターゲットバウンディングボックスが検出器によって誤って背景として分類されると、対応するトラックレットの時間的一貫性は維持されなくなります。この論文では、再チェックネットワークを提案することにより、「偽の背景」として誤って分類されたバウンディングボックスの復元に着手しました。再チェックネットワークは、以前のトラックレットを小さなオーバーヘッドで現在のフレームに効果的に伝播することにより、データの関連付けからモーション予測へのID埋め込みの役割を革新的に拡張します。伝播結果は、独立した効率的な埋め込み検索によって生成され、モデルが検出結果に過度に依存することを防ぎます。最終的には、「偽の背景」をリロードし、壊れたトラックレットを修復するのに役立ちます。強力なベースラインCSTrackに基づいて、新しいワンショットトラッカーを構築し、MOT16とMOT17でそれぞれ70.7→76.4、70.6→76.3MOTAの良好なゲインを達成します。また、新しい最先端のMOTAおよびIDF1パフォーマンスにも到達します。コードはhttps://github.com/JudasDie/SOTSでリリースされています。
The one-shot multi-object tracking, which integrates object detection and ID embedding extraction into a unified network, has achieved groundbreaking results in recent years. However, current one-shot trackers solely rely on single-frame detections to predict candidate bounding boxes, which may be unreliable when facing disastrous visual degradation, e.g., motion blur, occlusions. Once a target bounding box is mistakenly classified as background by the detector, the temporal consistency of its corresponding tracklet will be no longer maintained. In this paper, we set out to restore the bounding boxes misclassified as ``fake background'' by proposing a re-check network. The re-check network innovatively expands the role of ID embedding from data association to motion forecasting by effectively propagating previous tracklets to the current frame with a small overhead. Note that the propagation results are yielded by an independent and efficient embedding search, preventing the model from over-relying on detection results. Eventually, it helps to reload the ``fake background'' and repair the broken tracklets. Building on a strong baseline CSTrack, we construct a new one-shot tracker and achieve favorable gains by 70.7 → 76.4, 70.6 → 76.3 MOTA on MOT16 and MOT17, respectively. It also reaches a new state-of-the-art MOTA and IDF1 performance. Code is released at https://github.com/JudasDie/SOTS.
updated: Sun Dec 12 2021 11:43:43 GMT+0000 (UTC)
published: Mon Apr 19 2021 16:42:47 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト