arXiv reaDer
暗闇の中でのマッチング:暗いシーンの画像ペアをマッチングするためのデータセット
Matching in the Dark: A Dataset for Matching Image Pairs of Low-light Scenes
この論文では、SfMおよびビジュアルSLAMアプリケーションのフロンティアを広げることを目的として、暗いシーンの一致する画像について検討します。最近のイメージセンサーは、シーンの明るさを8ビット以上の精度で記録でき、RAW形式の画像で利用できます。このような高精度な情報を駆使して、従来の方法では処理できない極度に暗いシーンの画像に対応することに関心があります。極端に暗いシーンでは、輝度情報の一部がRAW形式の画像の下位ビットに存在する場合でも、カメラでの標準のRAW画像処理ではそれらを適切に利用できません。 Chen et al。によって最近示されたように、CNNは、そのようなRAW形式の画像から自然な外観の画像を生成することを学ぶことができます。 RAW形式の画像に保存されているこのような情報を画像マッチングに利用できるかどうか、またどの程度活用できるかを検討するために、MID(暗闇でのマッチング)という名前の新しいデータセットを作成しました。それを使用して、8つの画像強調方法と古典的/ニューラルローカル記述子と古典的/神経初期ポイントマッチング方法からなる11の画像マッチング方法の組み合わせを実験的に評価しました。結果は、RAW形式の画像を使用する利点と、上記のコンポーネントメソッドの長所と短所を示しています。それらはまた、さらなる研究の余地があることを意味します。
This paper considers matching images of low-light scenes, aiming to widen the frontier of SfM and visual SLAM applications. Recent image sensors can record the brightness of scenes with more than eight-bit precision, available in their RAW-format image. We are interested in making full use of such high-precision information to match extremely low-light scene images that conventional methods cannot handle. For extreme low-light scenes, even if some of their brightness information exists in the RAW format images' low bits, the standard raw image processing on cameras fails to utilize them properly. As was recently shown by Chen et al., CNNs can learn to produce images with a natural appearance from such RAW-format images. To consider if and how well we can utilize such information stored in RAW-format images for image matching, we have created a new dataset named MID (matching in the dark). Using it, we experimentally evaluated combinations of eight image-enhancing methods and eleven image matching methods consisting of classical/neural local descriptors and classical/neural initial point-matching methods. The results show the advantage of using the RAW-format images and the strengths and weaknesses of the above component methods. They also imply there is room for further research.
updated: Tue Sep 14 2021 06:30:53 GMT+0000 (UTC)
published: Wed Sep 08 2021 12:30:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト