arXiv reaDer
監視環境における最先端の超解像アルゴリズムの有効性
Effectiveness of State-of-the-Art Super Resolution Algorithms in Surveillance Environment
画像超解像(SR)は、強化された情報を抽出するために、観察者が画像を綿密に検査する必要がある領域でのアプリケーションを見つけます。そのような焦点を絞ったアプリケーションの1つは、監視フィードのオフラインフォレンジック分析です。カメラハードウェア、カメラポーズ、制限された帯域幅、さまざまな照明条件、およびオクルージョンの制限により、監視フィードの品質が大幅に低下することがあり、その結果、シーン内の動作、アクティビティ、およびその他の散発的な情報の監視が損なわれます。提案された研究作業では、4つの従来の効果的なSRアルゴリズムと3つの深層学習ベースのSRアルゴリズムの有効性を調べて、トレーニングデータの選択肢が限られている監視環境で適切に実行される最高の方法を探しました。これらのアルゴリズムは、単一の低解像度(LR)入力画像から高解像度の出力画像を生成します。パフォーマンス分析には、6つの監視データセットからの220枚の画像のサブセットが使用されました。これは、カメラからの距離が変化し、照明条件が変化し、背景が複雑な個人で構成されています。これらのアルゴリズムのパフォーマンスは、定性的および定量的メトリックの両方を使用して評価および比較されています。これらのSRアルゴリズムも、顔検出の精度に基づいて比較されています。すべてのアルゴリズムのパフォーマンスを分析および比較することにより、外部辞書を使用した畳み込みニューラルネットワーク(CNN)ベースのSR手法が、堅牢な顔検出精度を達成し、さまざまな監視条件下で最適な定量的メトリック結果をスコアリングすることにより、最良であることが証明されました。これは、CNN層が外部辞書を使用してより複雑な機能を徐々に学習するためです。
Image Super Resolution (SR) finds applications in areas where images need to be closely inspected by the observer to extract enhanced information. One such focused application is an offline forensic analysis of surveillance feeds. Due to the limitations of camera hardware, camera pose, limited bandwidth, varying illumination conditions, and occlusions, the quality of the surveillance feed is significantly degraded at times, thereby compromising monitoring of behavior, activities, and other sporadic information in the scene. For the proposed research work, we have inspected the effectiveness of four conventional yet effective SR algorithms and three deep learning-based SR algorithms to seek the finest method that executes well in a surveillance environment with limited training data op-tions. These algorithms generate an enhanced resolution output image from a sin-gle low-resolution (LR) input image. For performance analysis, a subset of 220 images from six surveillance datasets has been used, consisting of individuals with varying distances from the camera, changing illumination conditions, and complex backgrounds. The performance of these algorithms has been evaluated and compared using both qualitative and quantitative metrics. These SR algo-rithms have also been compared based on face detection accuracy. By analyzing and comparing the performance of all the algorithms, a Convolutional Neural Network (CNN) based SR technique using an external dictionary proved to be best by achieving robust face detection accuracy and scoring optimal quantitative metric results under different surveillance conditions. This is because the CNN layers progressively learn more complex features using an external dictionary.
updated: Thu Jul 08 2021 22:28:48 GMT+0000 (UTC)
published: Thu Jul 08 2021 22:28:48 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト