arXiv reaDer
デュアル拡散: RSI におけるブラインド超解像度再構成のためのデュアル条件付きノイズ除去拡散確率モデル
Dual-Diffusion: Dual Conditional Denoising Diffusion Probabilistic Models for Blind Super-Resolution Reconstruction in RSIs
これまでの超解像再構成 (SR) 作品は、バイキュービック ダウンサンプリングなどの劣化操作が固定されていることを常に前提として設計されていました。しかし、リモートセンシング画像に関しては、気象要因や軌道高度などの予期せぬ要因によって視覚性能がぼやける可能性があります。さまざまな劣化に対処するためにブラインド SR 手法が提案されています。 RSI におけるブラインド SR には主に 2 つの課題があります。1) 劣化カーネルの正確な推定速度。 2) 不良設定問題におけるリアルな画像生成。この課題に対処するために、二重条件付きノイズ除去拡散確率モデル (DDSR) に基づいた新しいブラインド SR フレームワークを提案します。私たちの研究では、カーネル推定の進行状況と再構築の進行状況という 2 つの側面から条件付きノイズ除去拡散確率モデル (DDPM) を導入します。これは二重拡散と呼ばれます。カーネル推定の進捗に関しては、低解像度 (LR) 画像を条件として、カーネル分布と潜在分布の間の可逆マッピングを研究することによって、新しい DDPM ベースのカーネル予測子が構築されます。再構成の進捗については、予測された劣化カーネルとLR画像を条件情報として、LR画像からHR画像へのマッピングを学習するDDPMベースの再構成器を構築します。包括的な実験により、SOTA ブラインド SR 手法と比較して、私たちの提案の優先度が示されています。ソースコードは https://github.com/Lincoln20030413/DDSR で入手できます。
Previous super-resolution reconstruction (SR) works are always designed on the assumption that the degradation operation is fixed, such as bicubic downsampling. However, as for remote sensing images, some unexpected factors can cause the blurred visual performance, like weather factors, orbit altitude, etc. Blind SR methods are proposed to deal with various degradations. There are two main challenges of blind SR in RSIs: 1) the accu-rate estimation of degradation kernels; 2) the realistic image generation in the ill-posed problem. To rise to the challenge, we propose a novel blind SR framework based on dual conditional denoising diffusion probabilistic models (DDSR). In our work, we introduce conditional denoising diffusion probabilistic models (DDPM) from two aspects: kernel estimation progress and re-construction progress, named as the dual-diffusion. As for kernel estimation progress, conditioned on low-resolution (LR) images, a new DDPM-based kernel predictor is constructed by studying the invertible mapping between the kernel distribution and the latent distribution. As for reconstruction progress, regarding the predicted degradation kernels and LR images as conditional information, we construct a DDPM-based reconstructor to learning the mapping from the LR images to HR images. Com-prehensive experiments show the priority of our proposal com-pared with SOTA blind SR methods. Source Code is available at https://github.com/Lincoln20030413/DDSR
updated: Sat May 20 2023 11:18:38 GMT+0000 (UTC)
published: Sat May 20 2023 11:18:38 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト