ほとんどのオンラインマルチオブジェクトトラッカーは、トラッキングからの入力なしで、ニューラルネットでスタンドアロンでオブジェクト検出を実行します。このホワイトペーパーでは、新しいオンライン共同検出および追跡モデルであるTraDeS(TRAck to DEtect and Segment)を紹介し、追跡の手がかりを活用してエンドツーエンドの検出を支援します。 TraDeSは、コストボリュームによってオブジェクト追跡オフセットを推測します。これは、現在のオブジェクトの検出とセグメンテーションを改善するために、以前のオブジェクト機能を伝播するために使用されます。 TraDeSの有効性と優位性は、MOT(2D追跡)、nuScenes(3D追跡)、MOTS、Youtube-VIS(インスタンスセグメンテーション追跡)を含む4つのデータセットで示されています。プロジェクトページ:https://jialianwu.com/projects/TraDeS.html。
Most online multi-object trackers perform object detection stand-alone in a neural net without any input from tracking. In this paper, we present a new online joint detection and tracking model, TraDeS (TRAck to DEtect and Segment), exploiting tracking clues to assist detection end-to-end. TraDeS infers object tracking offset by a cost volume, which is used to propagate previous object features for improving current object detection and segmentation. Effectiveness and superiority of TraDeS are shown on 4 datasets, including MOT (2D tracking), nuScenes (3D tracking), MOTS and Youtube-VIS (instance segmentation tracking). Project page: https://jialianwu.com/projects/TraDeS.html.