arXiv reaDer
光心対称性事前評価を使用した夜間スマートフォンの反射フレアの除去
Nighttime Smartphone Reflective Flare Removal Using Optical Center Symmetry Prior
反射フレアは、光がレンズ内で反射するときに発生する現象で、写真に輝点や「ゴースト効果」が発生し、写真の品質に影響を与える可能性があります。反射フレアをなくすことは非常に望ましいことですが、困難です。多くの既存の方法は、これらの輝点を検出するために手動で設計された機能に依存していますが、さまざまな種類の光によって作成された反射フレアを識別できないことが多く、複数の光源があるシナリオでは光源を誤って削除することさえあります。これらの課題に対処するために、光学中心の対称性を事前に提案します。これは、反射フレアと光源がレンズの光学中心の周りで常に対称であることを示唆しています。この事前情報は、反射フレアの提案領域をより正確に特定するのに役立ち、ほとんどのスマートフォン カメラに適用できます。この前例に基づいて、多様で現実的な反射フレア パターンを含む、BracketFlare と呼ばれる最初の反射フレア除去データセットを作成します。連続ブラケティングを使用して、露出不足の画像の反射フレア パターンをキャプチャし、それを通常露出の画像と組み合わせて、フレアが破損した画像とフレアのない画像のペアを合成します。データセットを使用すると、反射フレアを効果的に除去するようにニューラル ネットワークをトレーニングできます。広範な実験により、合成データセットと現実世界のデータセットの両方に対するこの方法の有効性が実証されています。
Reflective flare is a phenomenon that occurs when light reflects inside lenses, causing bright spots or a "ghosting effect" in photos, which can impact their quality. Eliminating reflective flare is highly desirable but challenging. Many existing methods rely on manually designed features to detect these bright spots, but they often fail to identify reflective flares created by various types of light and may even mistakenly remove the light sources in scenarios with multiple light sources. To address these challenges, we propose an optical center symmetry prior, which suggests that the reflective flare and light source are always symmetrical around the lens's optical center. This prior helps to locate the reflective flare's proposal region more accurately and can be applied to most smartphone cameras. Building on this prior, we create the first reflective flare removal dataset called BracketFlare, which contains diverse and realistic reflective flare patterns. We use continuous bracketing to capture the reflective flare pattern in the underexposed image and combine it with a normally exposed image to synthesize a pair of flare-corrupted and flare-free images. With the dataset, neural networks can be trained to remove the reflective flares effectively. Extensive experiments demonstrate the effectiveness of our method on both synthetic and real-world datasets.
updated: Mon Mar 27 2023 09:44:40 GMT+0000 (UTC)
published: Mon Mar 27 2023 09:44:40 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト