arXiv reaDer
視覚追跡のための蒸留シャム ネットワーク
Distilled Siamese Networks for Visual Tracking
近年、シャム ネットワーク ベースのトラッカーは、リアルタイム トラッキングの最先端技術を大幅に進歩させました。成功したにもかかわらず、シャム トラッカーはメモリ コストが高くなる傾向があり、メモリ バジェットが限られているモバイル デバイスへの適用が制限されています。この問題に対処するために、教師と生徒の知識蒸留モデルによって大規模なシャムトラッカー (教師) から重要な知識を取得する、小さくて高速で正確なトラッカー (生徒) を学習するための蒸留されたシャム追跡フレームワークを提案します。このモデルは、学校で通常採用されている 1 人の教師と複数の生徒の学習方法から直感的に発想を得ています。特に、私たちのモデルには、単一の教師と生徒の蒸留モジュールと、生徒と生徒の知識共有メカニズムが含まれています。前者は、トラッキング固有の蒸留戦略を使用して、教師から生徒に知識を伝達するように設計されています。後者は学生間の相互学習に活用され、深い知識理解を可能にします。いくつかの人気のあるシャム トラッカーの広範な経験的評価は、私たちのフレームワークの一般性と有効性を示しています。さらに、5 つの追跡ベンチマークの結果は、提案された蒸留トラッカーが最大 18 倍の圧縮率と 265 FPS のフレームレートを達成し、基本モデルと比較して同等の追跡精度を得ることを示しています。
In recent years, Siamese network based trackers have significantly advanced the state-of-the-art in real-time tracking. Despite their success, Siamese trackers tend to suffer from high memory costs, which restrict their applicability to mobile devices with tight memory budgets. To address this issue, we propose a distilled Siamese tracking framework to learn small, fast and accurate trackers (students), which capture critical knowledge from large Siamese trackers (teachers) by a teacher-students knowledge distillation model. This model is intuitively inspired by the one teacher vs. multiple students learning method typically employed in schools. In particular, our model contains a single teacher-student distillation module and a student-student knowledge sharing mechanism. The former is designed using a tracking-specific distillation strategy to transfer knowledge from a teacher to students. The latter is utilized for mutual learning between students to enable in-depth knowledge understanding. Extensive empirical evaluations on several popular Siamese trackers demonstrate the generality and effectiveness of our framework. Moreover, the results on five tracking benchmarks show that the proposed distilled trackers achieve compression rates of up to 18× and frame-rates of 265 FPS, while obtaining comparable tracking accuracy compared to base models.
updated: Mon Nov 28 2022 20:04:38 GMT+0000 (UTC)
published: Wed Jul 24 2019 17:46:44 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト