暗闇の中での雨は、一般的な自然現象です。このような状況で撮影された写真は、自動運転、監視システム、夜間撮影など、さまざまな夜間活動のパフォーマンスに大きな影響を与えます。低照度の強化または排水のために設計された既存の方法は有望な性能を示しますが、低照度を明るくし、雨を除去するというタスクに同時に対処するには限界があります。さらに、「低照度強調に続くデレイン」またはその逆などのカスケード アプローチを使用すると、処理が困難な雨パターンまたは過度にぼやけて露出オーバーの画像になる可能性があります。これらの制限を克服するために、L^2RIRNet と呼ばれるエンド ツー エンド ネットワークを提案します。私たちのネットワークには、主にペアワイズ劣化特徴ベクトル抽出ネットワーク (P-Net) と復元ネットワーク (R-Net) が含まれています。 P-Net は、コントラスト学習を使用して画像復元プロセスをガイドし、暗い領域と明るい領域の劣化特徴ベクトルを別々に学習できます。 R-Net は、イメージの復元を担当します。また、効果的な高速フーリエ - ResNet Detail Guidance Module (FFR-DG) も紹介します。これは、劣化情報を含まないがテクスチャの詳細情報に焦点を当てた詳細画像を使用して、最初に画像の復元をガイドします。さらに、合成および現実世界の低照度雨画像を含むデータセットを提供します。広範な実験により、L^2RIRNet は、合成および複雑な実世界のシナリオの両方で既存の方法よりも優れていることが実証されています。
Rain in the dark is a common natural phenomenon. Photos captured in such a condition significantly impact the performance of various nighttime activities, such as autonomous driving, surveillance systems, and night photography. While existing methods designed for low-light enhancement or deraining show promising performance, they have limitations in simultaneously addressing the task of brightening low light and removing rain. Furthermore, using a cascade approach, such as ``deraining followed by low-light enhancement'' or vice versa, may lead to difficult-to-handle rain patterns or excessively blurred and overexposed images. To overcome these limitations, we propose an end-to-end network called L^2RIRNet which can jointly handle low-light enhancement and deraining. Our network mainly includes a Pairwise Degradation Feature Vector Extraction Network (P-Net) and a Restoration Network (R-Net). P-Net can learn degradation feature vectors on the dark and light areas separately, using contrastive learning to guide the image restoration process. The R-Net is responsible for restoring the image. We also introduce an effective Fast Fourier - ResNet Detail Guidance Module (FFR-DG) that initially guides image restoration using detail image that do not contain degradation information but focus on texture detail information. Additionally, we contribute a dataset containing synthetic and real-world low-light-rainy images. Extensive experiments demonstrate that our L^2RIRNet outperforms existing methods in both synthetic and complex real-world scenarios.