画像ノイズのモデリングと合成は、多くのコンピュータービジョンアプリケーションで重要な側面です。文献で広く使用されている長年の加法性白色ガウスおよび異分散(信号依存)ノイズモデルは、実際のセンサーノイズの大まかな近似のみを提供します。このホワイトペーパーでは、最近の正規化フローアーキテクチャに基づく強力で正確なノイズモデルであるノイズフローを紹介します。ノイズフローは、確立された基本的なパラメトリックノイズモデル(信号依存ノイズなど)と、フローネットワークを正規化する柔軟性と表現力を組み合わせたものです。その結果、2500未満のパラメーターを含む複数のカメラとゲインファクターを表すことができる、単一の包括的でコンパクトなノイズモデルが作成されます。ノイズフローは、既存のノイズモデルよりも大幅に優れており、カメラで調整されたノイズレベル関数よりもNAT /ピクセルが0.42改善されており、サンプリングノイズの可能性が52%向上しています。ノイズフローは、単純なパラメトリックモデルを超えて、ディープラーニングとデータ駆動型のノイズ分布の力を活用するものに移行する最初の重大な試みです。
Modeling and synthesizing image noise is an important aspect in many computer vision applications. The long-standing additive white Gaussian and heteroscedastic (signal-dependent) noise models widely used in the literature provide only a coarse approximation of real sensor noise. This paper introduces Noise Flow, a powerful and accurate noise model based on recent normalizing flow architectures. Noise Flow combines well-established basic parametric noise models (e.g., signal-dependent noise) with the flexibility and expressiveness of normalizing flow networks. The result is a single, comprehensive, compact noise model containing fewer than 2500 parameters yet able to represent multiple cameras and gain factors. Noise Flow dramatically outperforms existing noise models, with 0.42 nats/pixel improvement over the camera-calibrated noise level functions, which translates to 52% improvement in the likelihood of sampled noise. Noise Flow represents the first serious attempt to go beyond simple parametric models to one that leverages the power of deep learning and data-driven noise distributions.