オクルージョンは、オブジェクト検出器とトラッカーが直面する最も重要な課題の1つです。過去にオブジェクトの検出と追跡の両方が多くの注目を集めてきましたが、このドメインのほとんどの既存の方法は、オブジェクトが遮られたときにオブジェクトの検出または追跡を対象としていません。ただし、オクルージョンを介して対象のオブジェクトを検出または追跡できるようにすることは、さまざまな自律タスクにとって長年の課題でした。明示的なオクルージョンモデリングを備えたビジュアルオブジェクトトラッカーを使用する従来の方法では、ドリフトが発生し、データについていくつかの基本的な仮定が行われます。領域ベースのビデオオブジェクト検出器の成功に基づいて構築された「検出による追跡」アプローチでこれに対処することを提案します。私たちのビデオレベルのオブジェクト検出器は、そのコアに新しい反復計算ユニットを使用しており、オクルージョン下でもオブジェクトの特徴を長期間伝播することができます。最後に、私たちのアプローチを既存の最先端のビデオオブジェクト検出器と比較し、私たちのアプローチが、ネジ、ナット、ボルトなどの小さなオブジェクトが頻繁に得られるインターネットから収集された家具組み立てビデオのデータセットで優れた結果を達成することを示しますカメラの視点から遮られています。
Occlusion is one of the most significant challenges encountered by object detectors and trackers. While both object detection and tracking has received a lot of attention in the past, most existing methods in this domain do not target detecting or tracking objects when they are occluded. However, being able to detect or track an object of interest through occlusion has been a long standing challenge for different autonomous tasks. Traditional methods that employ visual object trackers with explicit occlusion modeling experience drift and make several fundamental assumptions about the data. We propose to address this with a `tracking-by-detection` approach that builds upon the success of region based video object detectors. Our video level object detector uses a novel recurrent computational unit at its core that enables long term propagation of object features even under occlusion. Finally, we compare our approach with existing state-of-the-art video object detectors and show that our approach achieves superior results on a dataset of furniture assembly videos collected from the internet, where small objects like screws, nuts, and bolts often get occluded from the camera viewpoint.