arXiv reaDer
キャリブレーションされたカメラを使用した2D範囲データでの自己監視型人物検出
Self-Supervised Person Detection in 2D Range Data using a Calibrated Camera
ディープラーニングは、2D範囲データにおける最先端の人物検出器の重要な構成要素です。ただし、これらのディープネットワークのトレーニングとテストに使用できる注釈付きデータセットはごくわずかであり、新しい環境や異なるLiDARモデルで展開した場合のパフォーマンスが制限される可能性があります。キャリブレーションされたカメラの画像ベースの検出器(Faster R-CNNなど)の境界ボックスを使用して、2D LiDARベースの人物検出器のトレーニングラベル(疑似ラベルと呼ばれる)を自動的に生成する方法を提案します。 DROW3とDR-SPAAMの2つの検出器モデルを使用したJackRabbotデータセットでの実験を通じて、疑似ラベルでトレーニングまたは微調整された自己監視検出器が、異なるデータセットからの手動注釈を使用してトレーニングされた検出器よりも優れていることを示します。堅牢なトレーニング手法と組み合わせることで、自己監視検出器は、手動の注釈を使用してトレーニングされたものに近いパフォーマンスに到達します。私たちの方法は、追加のラベル付け作業なしで展開中に人物検出器を改善する効果的な方法であり、関連するロボットアプリケーションをサポートするためにソースコードをリリースします。
Deep learning is the essential building block of state-of-the-art person detectors in 2D range data. However, only a few annotated datasets are available for training and testing these deep networks, potentially limiting their performance when deployed in new environments or with different LiDAR models. We propose a method, which uses bounding boxes from an image-based detector (e.g. Faster R-CNN) on a calibrated camera to automatically generate training labels (called pseudo-labels) for 2D LiDAR-based person detectors. Through experiments on the JackRabbot dataset with two detector models, DROW3 and DR-SPAAM, we show that self-supervised detectors, trained or fine-tuned with pseudo-labels, outperform detectors trained using manual annotations from a different dataset. Combined with robust training techniques, the self-supervised detectors reach a performance close to the ones trained using manual annotations. Our method is an effective way to improve person detectors during deployment without any additional labeling effort, and we release our source code to support relevant robotic applications.
updated: Wed Dec 16 2020 12:10:04 GMT+0000 (UTC)
published: Wed Dec 16 2020 12:10:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト