arXiv reaDer
低照度生ノイズ除去の対照学習
Contrastive Learning for Low-light Raw Denoising
光量の少ないシーンでの画像/ビデオのノイズ除去は、フォトン数が限られていることとノイズが高いため、非常に困難な問題です。この論文では、この問題に対処するための対照的な学習による新しいアプローチを提案します。一部の高レベルのコンピューター ビジョン タスクで使用された対照学習の成功に着想を得て、このアイデアを低レベルのノイズ除去タスクに取り入れました。この目標を達成するために、新しいノイズ除去コントラスト正則化 (DCR) を導入して、ノイズの多い画像とクリーンな画像の情報を活用します。特徴空間では、DCR はノイズ除去された画像をクリーンな画像に近づけ、ノイズの多い画像から遠ざけます。さらに、Wnet と呼ばれる新しい機能埋め込みネットワークを構築します。これは、高周波情報の抽出により効果的です。月のない晴れた夜に 0.6 ミリルクスで撮影された静止画像と、星明かりの下でのビデオ (月が存在しない、<0.001 ルクス) をキャプチャする実際の低照度データセットで実験を行います。結果は、我々の方法が既存の方法と比較してより高いPSNRとより良い視覚品質を達成できることを示しています
Image/video denoising in low-light scenes is an extremely challenging problem due to limited photon count and high noise. In this paper, we propose a novel approach with contrastive learning to address this issue. Inspired by the success of contrastive learning used in some high-level computer vision tasks, we bring in this idea to the low-level denoising task. In order to achieve this goal, we introduce a new denoising contrastive regularization (DCR) to exploit the information of noisy images and clean images. In the feature space, DCR makes the denoised image closer to the clean image and far away from the noisy image. In addition, we build a new feature embedding network called Wnet, which is more effective to extract high-frequency information. We conduct the experiments on a real low-light dataset that captures still images taken on a moonless clear night in 0.6 millilux and videos under starlight (no moon present, <0.001 lux). The results show that our method can achieve a higher PSNR and better visual quality compared with existing methods
updated: Fri May 05 2023 08:13:53 GMT+0000 (UTC)
published: Fri May 05 2023 08:13:53 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト