arXiv reaDer
DynamicISP: 画像認識用の動的に制御される画像信号プロセッサ
DynamicISP: Dynamically Controlled Image Signal Processor for Image Recognition
画像信号プロセッサ (ISP) は、画像認識タスクおよびキャプチャされた画像の知覚品質において重要な役割を果たします。ほとんどの場合、専門家は ISP の多くのパラメータを手動で調整するために多大な努力を払っていますが、パラメータは最適ではありません。文献では、機械学習ベースのパラメータ調整技術と DNN ベースの ISP 技術の 2 種類の技術が活発に研究されています。前者は軽量ですが表現力に欠けます。後者には表現力がありますが、エッジ デバイスでは計算コストが重すぎます。これらの問題を解決するために、複数の従来の ISP 機能で構成され、前フレームの認識結果に応じて各フレームのパラメータを動的に制御する「DynamicISP」を提案します。私たちの方法が複数のISP機能のパラメータをうまく制御し、単一および複数カテゴリのオブジェクト検出タスクで低い計算コストで最先端の精度を達成することを示します。
Image Signal Processors (ISPs) play important roles in image recognition tasks as well as in the perceptual quality of captured images. In most cases, experts make a lot of effort to manually tune many parameters of ISPs, but the parameters are sub-optimal. In the literature, two types of techniques have been actively studied: a machine learning-based parameter tuning technique and a DNN-based ISP technique. The former is lightweight but lacks expressive power. The latter has expressive power, but the computational cost is too heavy on edge devices. To solve these problems, we propose "DynamicISP," which consists of multiple classical ISP functions and dynamically controls the parameters of each frame according to the recognition result of the previous frame. We show our method successfully controls the parameters of multiple ISP functions and achieves state-of-the-art accuracy with low computational cost in single and multi-category object detection tasks.
updated: Mon Mar 27 2023 07:02:09 GMT+0000 (UTC)
published: Wed Nov 02 2022 14:22:50 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト