モバイルデバイスでの低照度イメージングは、比較的小さなアパーチャを通過する入射光が不十分であり、信号対雑音比が低くなるため、通常は困難です。低照度の画像処理に関するこれまでの作業のほとんどは、照明調整、色の強調、ノイズ除去などの単一のタスクにのみ焦点を当てています。または、特定のカメラモデルから収集された短時間露光画像のペアに大きく依存する共同照明調整およびノイズ除去タスクであるため、これらのアプローチは、カメラ固有の共同強化および復元が必要な実際の設定では実用的でなく、一般化できません。この問題に取り組むために、本論文では、共同照明調整、色強調、およびノイズ除去を実行する低照度画像処理フレームワークを提案します。モデル固有のデータ収集の難しさとキャプチャされた画像の超高精細性を考慮して、係数推定ブランチと、ジョイントエンハンスメントおよびノイズ除去ブランチの2つのブランチを設計します。係数推定ブランチは低解像度空間で機能し、二国間学習を介して拡張の係数を予測しますが、ジョイント拡張およびノイズ除去ブランチはフル解像度空間で機能し、ジョイント拡張およびノイズ除去を段階的に実行します。既存の方法とは対照的に、私たちのフレームワークは、別のカメラモデルに適応するときに大量のデータを再収集する必要がないため、実際の使用のためにアプローチを微調整するために必要な労力が大幅に削減されます。広範な実験を通じて、現在の最先端の方法と比較した場合、実際の低照度イメージングアプリケーションでのその大きな可能性を示しています。
Low-light imaging on mobile devices is typically challenging due to insufficient incident light coming through the relatively small aperture, resulting in a low signal-to-noise ratio. Most of the previous works on low-light image processing focus either only on a single task such as illumination adjustment, color enhancement, or noise removal; or on a joint illumination adjustment and denoising task that heavily relies on short-long exposure image pairs collected from specific camera models, and thus these approaches are less practical and generalizable in real-world settings where camera-specific joint enhancement and restoration is required. To tackle this problem, in this paper, we propose a low-light image processing framework that performs joint illumination adjustment, color enhancement, and denoising. Considering the difficulty in model-specific data collection and the ultra-high definition of the captured images, we design two branches: a coefficient estimation branch as well as a joint enhancement and denoising branch. The coefficient estimation branch works in a low-resolution space and predicts the coefficients for enhancement via bilateral learning, whereas the joint enhancement and denoising branch works in a full-resolution space and progressively performs joint enhancement and denoising. In contrast to existing methods, our framework does not need to recollect massive data when being adapted to another camera model, which significantly reduces the efforts required to fine-tune our approach for practical usage. Through extensive experiments, we demonstrate its great potential in real-world low-light imaging applications when compared with current state-of-the-art methods.