マルチスペクトル手法は、さまざまな分野にわたって有望なパフォーマンスを発揮するため、かなりの注目を集めています。しかし、既存の方法のほとんどは、時間効率を最適化しながら 2 つのモダリティからの情報を効果的に利用することができません。これらの方法では精度や時間効率が優先されることが多く、パフォーマンスに改善の余地が残されています。この目的を達成するために、統一されたフレームワーク内で画像強調と検出を統合することにより、低照度条件下での歩行者検出を強化するための新しい方法であるブライトチャネル事前注意を提案します。この方法では、熱画像の HSV 画像の V チャネルをアテンション マップとして使用し、可視光画像の教師なし自動エンコーダをトリガーし、レイヤー全体で歩行者の特徴を徐々に強調します。さらに、教師なしの明るいチャネル事前アルゴリズムを利用して、低照度画像の光補正に対処します。提案された方法には、自己注意強化モジュールと検出モジュールが含まれており、これらが連携して物体検出を向上させます。初期照明マップは BCP を使用して推定され、強化ネットワークからのセルフ アテンション マップの学習をガイドして、歩行者に焦点を当てたより有益な表現を取得します。広範な実験により、提案された方法の有効性が実証されていることを示しています。
Multispectral methods have gained considerable attention due to their promising performance across various fields. However, most existing methods cannot effectively utilize information from two modalities while optimizing time efficiency. These methods often prioritize accuracy or time efficiency, leaving room for improvement in their performance. To this end, we propose a new method bright channel prior attention for enhancing pedestrian detection in low-light conditions by integrating image enhancement and detection within a unified framework. The method uses the V-channel of the HSV image of the thermal image as an attention map to trigger the unsupervised auto-encoder for visible light images, which gradually emphasizes pedestrian features across layers. Moreover, we utilize unsupervised bright channel prior algorithms to address light compensation in low light images. The proposed method includes a self-attention enhancement module and a detection module, which work together to improve object detection. An initial illumination map is estimated using the BCP, guiding the learning of the self-attention map from the enhancement network to obtain more informative representation focused on pedestrians. The extensive experiments show effectiveness of the proposed method is demonstrated through.