arXiv reaDer
本物のフレア除去に向けて: 包括的なパイプラインと新しいベンチマーク
Toward Real Flare Removal: A Comprehensive Pipeline and A New Benchmark
照明が不十分なシーンで撮影すると、複雑な光源が存在するため、強度、スペクトル、反射、収差がすべて劣化の原因となる強いフレア アーティファクトが画像に残ることがよくあります。画質に加えて、ダウンストリームのビジュアル アプリケーションのパフォーマンスにも影響します。したがって、レンズフレアとゴーストを除去することは、特に低照度環境では困難な問題となります。しかし、既存のフレア除去方法は主に、散乱フレアのカテゴリが単一で反射ゴーストが利用できないという、不適切なシミュレーションと現実世界のキャプチャの問題に限定されていました。したがって、フレア除去のデータセットを構築するには、包括的な劣化手順が重要です。理論的分析と現実世界の評価に基づいて、フレア劣化を伴うデータペアを生成するためのよく開発された方法論を提案します。この手順は包括的であり、散乱フレアの類似性と反射ゴーストの対称効果が実現されます。さらに、散乱フレアと反射フレアの影響をそれぞれ処理するリアルショット パイプラインも構築し、エンドツーエンド手法のデータを直接生成することを目指しています。実験結果は、提案された方法論が既存のフレア データセットに多様性を追加し、フレア データ ペアの包括的なマッピング手順を構築することを示しています。また、私たちの方法は、データ駆動型モデルを利用してフレア画像のより良い復元を実現し、実際のショットに基づいたより良い評価システムを提案することで、実際のフレア除去の分野での進歩を促進します。
Photographing in the under-illuminated scenes, the presence of complex light sources often leave strong flare artifacts in images, where the intensity, the spectrum, the reflection, and the aberration altogether contribute the deterioration. Besides the image quality, it also influence the performance of down-stream visual applications. Thus, removing the lens flare and ghosts is a challenge issue especially in low-light environment. However, existing methods for flare removal mainly restricted to the problems of inadequate simulation and real-world capture, where the categories of scattered flares are singular and the reflected ghosts are unavailable. Therefore, a comprehensive deterioration procedure is crucial for constructing the dataset of flare removal. Based on the theoretical analysis and real-world evaluation, we propose a well-developed methodology for generating the data-pairs with flare deterioration. The procedure is comprehensive, where the similarity of scattered flares and the symmetric effect of reflected ghosts are realized. Moreover, we also construct a real-shot pipeline that respectively processes the effects of scattering and reflective flares, aiming to directly generate the data for end-to-end methods. Experimental results show that the proposed methodology add diversity to the existing flare datasets and construct a comprehensive mapping procedure for flare data pairs. And our method facilities the data-driven model to realize better restoration in flare images and proposes a better evaluation system based on real shots, resulting promote progress in the area of real flare removal.
updated: Wed Jun 28 2023 02:57:25 GMT+0000 (UTC)
published: Wed Jun 28 2023 02:57:25 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト