arXiv reaDer
回転整流ネットワーク:モバイルビジョンの歩行者検出を可能にする
Rotational Rectification Network: Enabling Pedestrian Detection for Mobile Vision
歩行者検出データセットの大部分では、通常、歩行者は画像座標系に対して直立していると想定されています。ただし、この仮定は、携帯電話、UAV、起伏の多い地形の建設車両など、視覚を備えた多くのモバイルプラットフォームに常に当てはまるとは限りません。このような状況では、カメラの動きにより、歩行者の画像が極端な角度でキャプチャされる可能性があります。これにより、標準の歩行者検出器を使用すると、歩行者検出のパフォーマンスが非常に低下する可能性があります。この問題に対処するために、CNNベースの歩行者(またはオブジェクト)検出器に挿入してカメラの回転の大幅な変化に適応できる回転整流ネットワーク(R2N)を提案します。回転整流ネットワークは、回転情報を空間トランスネットワークに渡す2D回転推定モジュールを使用して、画像の特徴を歪めません。ロバストな回転推定を可能にするために、畳み込み特徴の回転シフトをキャプチャするグローバル極プーリング(GP-Pooling)演算子を提案します。実験を通じて、回転整流ネットワークを使用して、画像の回転が激しい場合の最先端の歩行者検出器のパフォーマンスを最大45%向上させる方法を示します。
Across a majority of pedestrian detection datasets, it is typically assumed that pedestrians will be standing upright with respect to the image coordinate system. This assumption, however, is not always valid for many vision-equipped mobile platforms such as mobile phones, UAVs or construction vehicles on rugged terrain. In these situations, the motion of the camera can cause images of pedestrians to be captured at extreme angles. This can lead to very poor pedestrian detection performance when using standard pedestrian detectors. To address this issue, we propose a Rotational Rectification Network (R2N) that can be inserted into any CNN-based pedestrian (or object) detector to adapt it to significant changes in camera rotation. The rotational rectification network uses a 2D rotation estimation module that passes rotational information to a spatial transformer network to undistort image features. To enable robust rotation estimation, we propose a Global Polar Pooling (GP-Pooling) operator to capture rotational shifts in convolutional features. Through our experiments, we show how our rotational rectification network can be used to improve the performance of the state-of-the-art pedestrian detector under heavy image rotation by up to 45%
updated: Tue Nov 03 2020 13:53:52 GMT+0000 (UTC)
published: Mon Jun 19 2017 00:08:38 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト