arXiv reaDer
Deep Multi-Object Trackerをトレーニングする方法
How To Train Your Deep Multi-Object Tracker
 ビジョンベースのマルチオブジェクトトラッキング(MOT)の最近の傾向は、ディープラーニングの表現力を活用して、オブジェクトの検出と追跡を共同で学習する方向に向かっています。ただし、既存の方法は、複数のオブジェクトの追跡精度(MOTA)や精度(MOTP)などの確立された追跡評価指標と相関しないことが多い損失関数を使用して、特定のサブモジュールのみをトレーニングします。これらの測定値は区別できないため、マルチオブジェクト追跡方法のエンドツーエンドのトレーニングに適切な損失関数を選択することは、未解決の研究課題です。このホワイトペーパーでは、MOTAとMOTPの微分可能なプロキシを提案することでこのギャップを埋め、深いマルチオブジェクトトラッカーのエンドツーエンドのトレーニングに適した損失関数に結合します。重要な要素として、ハンガリーのマッチングアルゴリズムを近似するディープハンガリーネット(DHN)モジュールを提案します。 DHNを使用すると、オブジェクトトラックとグラウンドトゥルースオブジェクトの対応を推定して、MOTAとMOTPの区別可能なプロキシを計算できます。これらのプロキシは、ディープトラッカーを直接最適化するために使用されます。提案された差別化可能なフレームワークが既存のマルチオブジェクトトラッカーのパフォーマンスを向上させることを実験的に実証し、MOTChallengeベンチマークで新しい最先端技術を確立します。コードはから公開されています。
The recent trend in vision-based multi-object tracking (MOT) is heading towards leveraging the representational power of deep learning to jointly learn to detect and track objects. However, existing methods train only certain sub-modules using loss functions that often do not correlate with established tracking evaluation measures such as Multi-Object Tracking Accuracy (MOTA) and Precision (MOTP). As these measures are not differentiable, the choice of appropriate loss functions for end-to-end training of multi-object tracking methods is still an open research problem. In this paper, we bridge this gap by proposing a differentiable proxy of MOTA and MOTP, which we combine in a loss function suitable for end-to-end training of deep multi-object trackers. As a key ingredient, we propose a Deep Hungarian Net (DHN) module that approximates the Hungarian matching algorithm. DHN allows estimating the correspondence between object tracks and ground truth objects to compute differentiable proxies of MOTA and MOTP, which are in turn used to optimize deep trackers directly. We experimentally demonstrate that the proposed differentiable framework improves the performance of existing multi-object trackers, and we establish a new state of the art on the MOTChallenge benchmark. Our code is publicly available from
updated: Thu Apr 23 2020 14:00:36 GMT+0000 (UTC)
published: Sat Jun 15 2019 21:34:30 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト