コンピュータ ビジョンの基本的な問題である物体検出は、スマート カメラ システムにおいて最も重要です。ただし、真に信頼性の高いカメラ システムを実現できるのは、基礎となるオブジェクト検出コンポーネントが、たとえば 1 日のさまざまな時間帯や悪天候など、さまざまなイメージング条件 (またはドメイン) にわたって十分に堅牢である場合のみです。信頼性の高いカメラシステムを実現するために、この論文では、そのような堅牢な検出器のトレーニングを試みます。残念ながら、さまざまなイメージング条件で優れた性能を発揮する検出器を構築するには、多数のコーナー ケースからラベル付けされたトレーニング イメージ (多くの場合、多数) が必要になります。このような大規模なラベル付きデータセットを手動で取得することは不可能な場合があるため、合成画像を使用して、さまざまなトレーニング画像ドメインを模倣することをお勧めします。検出器をさまざまなドメインに対して堅牢にするために、実際の画像と合成画像のペアの潜在的な表現を整列させる、新しい対照的な学習方法を提案します。ただし、埋め込みを単に対比すると、オブジェクト検出に不可欠な情報を壊滅的に忘れる可能性があることがわかりました。したがって、表現を対比しながら、忘却の問題を軽減するために、継続的な学習ベースのペナルティを採用します。提案された方法が、夜間の物体検出の非常に困難でありながら十分に研究されていないシナリオに対処するために、さまざまな代替方法よりも優れていることを示します。
Object Detection, a fundamental computer vision problem, has paramount importance in smart camera systems. However, a truly reliable camera system could be achieved if and only if the underlying object detection component is robust enough across varying imaging conditions (or domains), for instance, different times of the day, adverse weather conditions, etc. In an effort to achieving a reliable camera system, in this paper, we make an attempt to train such a robust detector. Unfortunately, to build a well-performing detector across varying imaging conditions, one would require labeled training images (often in large numbers) from a plethora of corner cases. As manually obtaining such a large labeled dataset may be infeasible, we suggest using synthetic images, to mimic different training image domains. We propose a novel, contrastive learning method to align the latent representations of a pair of real and synthetic images, to make the detector robust to the different domains. However, we found that merely contrasting the embeddings may lead to catastrophic forgetting of the information essential for object detection. Hence, we employ a continual learning based penalty, to alleviate the issue of forgetting, while contrasting the representations. We showcase that our proposed method outperforms a wide range of alternatives to address the extremely challenging, yet under-studied scenario of object detection at night-time.