arXiv reaDer
Flare7K: 現象学的夜間フレア除去データセット
Flare7K: A Phenomenological Nighttime Flare Removal Dataset
人工照明は、通常、夜間に撮影された画像に強いレンズ フレア アーティファクトを残します。夜間のフレアは、視覚的な品質に影響を与えるだけでなく、視覚アルゴリズムのパフォーマンスも低下させます。既存のフレア除去方法は、主に昼間のフレア除去に焦点を当て、夜間に失敗します。夜間のフレアの除去は、人工照明の固有の輝度とスペクトル、および夜間にキャプチャされたフレアの多様なパターンと画像の劣化のため、困難です。夜間のフレア除去データセットが不足しているため、この重要なタスクに関する研究は制限されています。このホワイト ペーパーでは、実際の夜間レンズ フレアの観察と統計に基づいて生成された最初の夜間フレア除去データセットである Flare7K を紹介します。 25 種類の散乱フレアと 10 種類の反射フレアで構成される、5,000 の散乱フレア画像と 2,000 の反射フレア画像を提供します。 7,000 のフレア パターンをフレアのない画像にランダムに追加して、フレアが破損した画像とフレアのない画像のペアを形成できます。ペアになったデータを使用して、ディープ モデルをトレーニングし、現実世界で撮影されたフレアによって破損した画像を効果的に復元できます。豊富なフレア パターンとは別に、既存のデータセットには通常存在しない、光源のラベル付け、きらめきのあるグレア、反射フレア、ストリークなどの豊富な注釈も提供します。したがって、私たちのデータセットは、夜間のフレア除去とフレアパターンのよりきめ細かい分析における新しい作業を容易にすることができます。広範な実験により、私たちのデータセットが既存のフレア データセットに多様性を追加し、夜間フレア除去のフロンティアを押し進めることが示されています。
Artificial lights commonly leave strong lens flare artifacts on images captured at night. Nighttime flare not only affects the visual quality but also degrades the performance of vision algorithms. Existing flare removal methods mainly focus on removing daytime flares and fail in nighttime. Nighttime flare removal is challenging because of the unique luminance and spectrum of artificial lights and the diverse patterns and image degradation of the flares captured at night. The scarcity of nighttime flare removal datasets limits the research on this crucial task. In this paper, we introduce, Flare7K, the first nighttime flare removal dataset, which is generated based on the observation and statistics of real-world nighttime lens flares. It offers 5,000 scattering and 2,000 reflective flare images, consisting of 25 types of scattering flares and 10 types of reflective flares. The 7,000 flare patterns can be randomly added to flare-free images, forming the flare-corrupted and flare-free image pairs. With the paired data, we can train deep models to restore flare-corrupted images taken in the real world effectively. Apart from abundant flare patterns, we also provide rich annotations, including the labeling of light source, glare with shimmer, reflective flare, and streak, which are commonly absent from existing datasets. Hence, our dataset can facilitate new work in nighttime flare removal and more fine-grained analysis of flare patterns. Extensive experiments show that our dataset adds diversity to existing flare datasets and pushes the frontier of nighttime flare removal.
updated: Wed Oct 12 2022 20:17:24 GMT+0000 (UTC)
published: Wed Oct 12 2022 20:17:24 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト