arXiv reaDer
極端に暗い画像を強調する学習のためのバースト写真
Burst Photography for Learning to Enhance Extremely Dark Images
非常に暗い場所で画像をキャプチャすることは、標準のカメラパイプラインに大きな課題をもたらします。画像が暗くなりすぎてノイズが多くなりすぎるため、従来の拡張技術を適用することはほとんど不可能になります。最近、学習ベースのアプローチは、改善された品質を可能にする実質的により表現力のある機能を備えているため、このタスクに非常に有望な結果を示しています。これらの研究を動機として、このホワイトペーパーでは、バースト写真を活用してパフォーマンスを向上させ、非常に暗い未加工画像からよりシャープで正確なRGB画像を取得することを目指しています。私たちが提案するフレームワークのバックボーンは、高品質の出力を段階的に生成する新しい粗雑なネットワークアーキテクチャです。粗いネットワークは低解像度のノイズ除去された生の画像を予測し、それは次に細かいネットワークに送られ、細かいスケールのディテールとリアルなテクスチャーが復元されます。ノイズレベルをさらに低減して色の精度を向上させるために、このネットワークを順列不変構造に拡張して、低光量の画像のバーストを入力として受け取り、複数の画像からの情報を機能レベルでマージします。私たちの実験は、私たちのアプローチが、より詳細でかなり高品質の画像を生成することにより、最先端の方法よりも知覚的に満足できる結果をもたらすことを示しています。
Capturing images under extremely low-light conditions poses significant challenges for the standard camera pipeline. Images become too dark and too noisy, which makes traditional enhancement techniques almost impossible to apply. Recently, learning-based approaches have shown very promising results for this task since they have substantially more expressive capabilities to allow for improved quality. Motivated by these studies, in this paper, we aim to leverage burst photography to boost the performance and obtain much sharper and more accurate RGB images from extremely dark raw images. The backbone of our proposed framework is a novel coarse-to-fine network architecture that generates high-quality outputs progressively. The coarse network predicts a low-resolution, denoised raw image, which is then fed to the fine network to recover fine-scale details and realistic textures. To further reduce the noise level and improve the color accuracy, we extend this network to a permutation invariant structure so that it takes a burst of low-light images as input and merges information from multiple images at the feature-level. Our experiments demonstrate that our approach leads to perceptually more pleasing results than the state-of-the-art methods by producing more detailed and considerably higher quality images.
updated: Fri Nov 19 2021 20:09:40 GMT+0000 (UTC)
published: Wed Jun 17 2020 13:19:07 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト