ビジュアルトラッキングは、近年かなりの進歩を遂げています。しかし、この分野の現在の研究は主に不透明な物体の追跡に焦点を合わせており、透明な物体の追跡にはほとんど注意が払われていません。この論文では、透過的オブジェクト追跡ベンチマーク(TOTB)を提案することにより、この問題を調査する最初の試みを行います。具体的には、TOTBは、15の多様な透明オブジェクトカテゴリからの225のビデオ(86Kフレーム)で構成されています。各シーケンスは、軸に沿った境界ボックスで手動でラベル付けされます。私たちの知る限り、TOTBは透過的なオブジェクトトラッキングに特化した最初のベンチマークです。既存のトラッカーがどのように機能するかを理解し、TOTBに関する将来の研究の比較を提供するために、25の最先端の追跡アルゴリズムを広範囲に評価します。評価結果は、透明なオブジェクト追跡を改善するためにより多くの努力が必要であることを示しています。さらに、不透明なオブジェクトの追跡におけるいくつかの一般的な信念と矛盾する、評価からのいくつかの重要な発見を観察します。たとえば、より深い機能が必ずしも改善に役立つとは限らないことがわかりました。さらに、将来の研究を促進するために、TransATOMという名前の新しいトラッカーを導入します。これは、追跡に透明性機能を活用し、評価された25のアプローチすべてを大幅に上回っています。 TOTBをリリースすることにより、学界と産業界の両方で透明なオブジェクト追跡の将来の研究と応用を促進することを期待しています。 TOTBと評価結果、およびTransATOMは、https://hengfan2010.github.io/projects/TOTBで入手できます。
Visual tracking has achieved considerable progress in recent years. However, current research in the field mainly focuses on tracking of opaque objects, while little attention is paid to transparent object tracking. In this paper, we make the first attempt in exploring this problem by proposing a Transparent Object Tracking Benchmark (TOTB). Specifically, TOTB consists of 225 videos (86K frames) from 15 diverse transparent object categories. Each sequence is manually labeled with axis-aligned bounding boxes. To the best of our knowledge, TOTB is the first benchmark dedicated to transparent object tracking. In order to understand how existing trackers perform and to provide comparison for future research on TOTB, we extensively evaluate 25 state-of-the-art tracking algorithms. The evaluation results exhibit that more efforts are needed to improve transparent object tracking. Besides, we observe some nontrivial findings from the evaluation that are discrepant with some common beliefs in opaque object tracking. For example, we find that deeper features are not always good for improvements. Moreover, to encourage future research, we introduce a novel tracker, named TransATOM, which leverages transparency features for tracking and surpasses all 25 evaluated approaches by a large margin. By releasing TOTB, we expect to facilitate future research and application of transparent object tracking in both the academia and industry. The TOTB and evaluation results as well as TransATOM are available at https://hengfan2010.github.io/projects/TOTB.