arXiv reaDer
Effects of Blur and Deblurring to Visual Object Tracking
直観的には、モーションブラーは視覚的なオブジェクトトラッキングのパフォーマンスを損なう可能性があります。ただし、モーションブラーのさまざまなレベルに対するトラッカーの堅牢性の定量的評価が不足しています。一方、画像のブレ除去方法は人間の目を楽にする視覚的に鮮明なビデオを生成できますが、視覚オブジェクトの追跡が画像のブレ除去の恩恵を受けるかどうかは不明です。このホワイトペーパーでは、モーションブラーのレベルが異なるさまざまなビデオと、トラッカーを評価するためのグラウンドトゥルーストラッキングの結果を含む、Blurred Video Trackingベンチマークを構築することにより、これら2つの問題に対処します。このベンチマークで23のトラッカーを広範囲に評価し、いくつかの新しい興味深い結果を観察します。具体的には、光のぼかしは多くのトラッカーのパフォーマンスを向上させる可能性がありますが、ぼかしが大きいと常に追跡パフォーマンスが低下します。また、画像のブレ除去は、大きくぼやけたビデオの追跡パフォーマンスを改善するのに役立つ可能性がありますが、軽くぼやけたビデオのパフォーマンスを損なうことがあります。これらの観察によると、モーションブラーに対するトラッカーの堅牢性を向上させる新しいGANベースのスキームを提案します。このスキームでは、追跡プロセス中にフレームを選択的にぼかすために、微調整された弁別器が適応評価者として使用されます。このスキームを使用して、6つのトラッカーの精度と堅牢性を改善しました。
Intuitively, motion blur may hurt the performance of visual object tracking. However, we lack quantitative evaluation of tracker robustness to different levels of motion blur. Meanwhile, while image deblurring methods can produce visually clearer videos for pleasing human eyes, it is unknown whether visual object tracking can benefit from image deblurring or not. In this paper, we address these two problems by constructing a Blurred Video Tracking benchmark, which contains a variety of videos with different levels of motion blurs, as well as ground truth tracking results for evaluating trackers. We extensively evaluate 23 trackers on this benchmark and observe several new interesting results. Specifically, we find that light blur may improve the performance of many trackers, but heavy blur always hurts the tracking performance. We also find that image deblurring may help to improve tracking performance on heavily blurred videos but hurt the performance on lightly blurred videos. According to these observations, we propose a new GAN based scheme to improve the tracker robustness to motion blurs. In this scheme, a finetuned discriminator is used as an adaptive assessor to selectively deblur frames during the tracking process. We use this scheme to successfully improve the accuracy and robustness of 6 trackers.
updated: Wed Aug 21 2019 15:02:14 GMT+0000 (UTC)
published: Wed Aug 21 2019 15:02:14 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト