arXiv reaDer
NOD:夜間の物体検出データセットを使用した極端な低照度条件下での検出を詳しく調べる
NOD: Taking a Closer Look at Detection under Extreme Low-Light Conditions with Night Object Detection Dataset
最近の研究は、知覚的に心地よい画像を生成することへの挑戦であることに加えて、低光は以前に考えられていたよりも機械認識にとってより困難であることが証明されていることを示しています。私たちの仕事では、暗い場所での物体検出を詳しく見ていきます。まず、この領域での新しい方法の開発と評価をサポートするために、夜間に路上でキャプチャされた動的なシーンを示す高品質の大規模な夜間物体検出(NOD)データセットを提示します。次に、照明条件を知覚の難しさに直接関連付け、機械の認識にとって低照度が問題となる原因を特定します。したがって、将来のメソッドの詳細な評価のために、データセットのサブセットにインスタンスレベルのアノテーションを提供します。また、ベースラインモデルのパフォーマンスの分析を提示して、将来の研究の機会を強調し、低照度が研究者の特別な注意を必要とする重要な問題であることを示します。さらに、低照度によって引き起こされる問題に対処するために、画像強調モジュールをオブジェクト検出フレームワークと2つの新しいデータ拡張手法に組み込むことを提案します。私たちの画像強調モジュールは、人間の視覚システムではなく機械の認知に最適な画像表現を学習するために、オブジェクト検出器のガイダンスの下でトレーニングされています。最後に、実験結果は、提案された方法が低照度データセットでのパフォーマンスの一貫した改善を示すことを確認します。
Recent work indicates that, besides being a challenge in producing perceptually pleasing images, low light proves more difficult for machine cognition than previously thought. In our work, we take a closer look at object detection in low light. First, to support the development and evaluation of new methods in this domain, we present a high-quality large-scale Night Object Detection (NOD) dataset showing dynamic scenes captured on the streets at night. Next, we directly link the lighting conditions to perceptual difficulty and identify what makes low light problematic for machine cognition. Accordingly, we provide instance-level annotation for a subset of the dataset for an in-depth evaluation of future methods. We also present an analysis of the baseline model performance to highlight opportunities for future research and show that low light is a non-trivial problem that requires special attention from the researchers. Further, to address the issues caused by low light, we propose to incorporate an image enhancement module into the object detection framework and two novel data augmentation techniques. Our image enhancement module is trained under the guidance of the object detector to learn image representation optimal for machine cognition rather than for the human visual system. Finally, experimental results confirm that the proposed method shows consistent improvement of the performance on low-light datasets.
updated: Wed Oct 20 2021 03:44:04 GMT+0000 (UTC)
published: Wed Oct 20 2021 03:44:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト