arXiv reaDer
熱画像におけるオブジェクト検出のための教師なし画像生成強化適応
Unsupervised Image-generation Enhanced Adaptation for Object Detection in Thermal images
 熱画像でのオブジェクト検出は重要なコンピュータービジョンタスクであり、無人車両、ロボット工学、監視、暗視などの多くのアプリケーションがあります。ディープラーニングベースの検出器は大きな進歩を遂げており、通常、大量のラベル付きトレーニングデータが必要です。ただし、熱画像内のオブジェクト検出用のラベル付きデータは、収集するのに乏しく高価です。多数のラベル付き可視画像を活用し、それらを熱画像ドメインに適応させる方法は、解決が期待されています。本論文は、熱画像における物体検出のための教師なし画像生成強化適応法を提案する。可視領域と熱領域の間のギャップを減らすために、提案された方法は、ターゲット画像に類似した擬似偽熱画像を生成し、可視ソース領域の注釈情報を保存します。画像生成には、CycleGANベースの画像から画像への変換と強度反転変換が含まれます。生成された偽の熱画像は、更新されたソースドメインとして使用されます。そして、既製のドメインAdaptive Faster RCNNを使用して、生成された中間ドメインと熱ターゲットドメイン間のギャップを削減します。実験は、提案された方法の有効性と優位性を示しています。
Object detection in thermal images is an important computer vision task and has many applications such as unmanned vehicles, robotics, surveillance and night vision. Deep learning based detectors have achieved major progress, which usually need large amount of labelled training data. However, labelled data for object detection in thermal images is scarce and expensive to collect. How to take advantage of the large number labelled visible images and adapt them into thermal image domain, is expected to solve. This paper proposes an unsupervised image-generation enhanced adaptation method for object detection in thermal images. To reduce the gap between visible domain and thermal domain, the proposed method manages to generate simulated fake thermal images that are similar to the target images, and preserves the annotation information of the visible source domain. The image generation includes a CycleGAN based image-to-image translation and an intensity inversion transformation. Generated fake thermal images are used as renewed source domain. And then the off-the-shelf Domain Adaptive Faster RCNN is utilized to reduce the gap between generated intermediate domain and the thermal target domain. Experiments demonstrate the effectiveness and superiority of the proposed method.
updated: Mon Nov 01 2021 00:49:45 GMT+0000 (UTC)
published: Mon Feb 17 2020 04:53:30 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト