arXiv reaDer
低解像度に別れを告げる: 画像超解像度のための拡散ウェーブレット アプローチ
Waving Goodbye to Low-Res: A Diffusion-Wavelet Approach for Image Super-Resolution
この論文では、単一画像超解像度 (SISR) のための新しい拡散ウェーブレット (DiWa) アプローチを紹介します。 Denoising Diffusion Probabilistic Models (DDPM) と Discrete Wavelet Transformation (DWT) の長所を活用します。 DDPM が DWT ドメインで動作できるようにすることで、当社の DDPM モデルはウェーブレット スペクトル上の超解像画像の高周波情報を効果的に幻覚させ、画像空間で高品質で詳細な再構成を実現します。定量的には、PSNR、SSIM、および LPIPS に関して、面 (8 倍スケーリング) および一般的な (4 倍スケーリング) SR ベンチマークの両方で、最先端の拡散ベースの SISR メソッド、つまり SR3 および SRDiff よりも優れています。一方、DWT を使用すると、比較したモデルよりも少ないパラメーターを使用することができました。SR3 と比較すると 550M ではなく 92M パラメーターであり、SRDiff と比較すると 12M ではなく 9.3M パラメーターです。さらに、私たちの方法は、推論時間を節約しながら、従来の一般的な SR データセットに対する他の最先端の生成方法よりも優れています。最後に、私たちの仕事は、さまざまなアプリケーションの可能性を強調しています。
This paper presents a novel Diffusion-Wavelet (DiWa) approach for Single-Image Super-Resolution (SISR). It leverages the strengths of Denoising Diffusion Probabilistic Models (DDPMs) and Discrete Wavelet Transformation (DWT). By enabling DDPMs to operate in the DWT domain, our DDPM models effectively hallucinate high-frequency information for super-resolved images on the wavelet spectrum, resulting in high-quality and detailed reconstructions in image space. Quantitatively, we outperform state-of-the-art diffusion-based SISR methods, namely SR3 and SRDiff, regarding PSNR, SSIM, and LPIPS on both face (8x scaling) and general (4x scaling) SR benchmarks. Meanwhile, using DWT enabled us to use fewer parameters than the compared models: 92M parameters instead of 550M compared to SR3 and 9.3M instead of 12M compared to SRDiff. Additionally, our method outperforms other state-of-the-art generative methods on classical general SR datasets while saving inference time. Finally, our work highlights its potential for various applications.
updated: Wed Apr 05 2023 11:57:48 GMT+0000 (UTC)
published: Tue Apr 04 2023 17:52:49 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト