arXiv reaDer
実像超解像のための全周波数領域適応表現の学習
Learning Omni-frequency Region-adaptive Representations for Real Image Super-Resolution
単一の均一な劣化(つまり、バイキュービックダウンサンプリング)の解決に焦点を当てた従来の単一画像超解像(SISR)手法は、複雑で現実的なものであるため、実際の低解像度(LR)画像に適用するとパフォーマンスが低下します。劣化。このより困難な実像超解像(RealSR)問題を解決するための鍵は、有益でコンテンツを意識した特徴表現を学習することにあります。この論文では、両方の課題に対処するために全周波数領域適応ネットワーク(ORNet)を提案します。ここでは、すべての低、中、高周波数の全周波数機能の機能と呼びます。具体的には、周波数の観点から開始し、周波数分解(FD)モジュールを設計して、さまざまな周波数成分を分離し、実際のLR画像で失われた情報を包括的に補正します。次に、実際のLR画像のさまざまな領域でさまざまな周波数情報が失われることを考慮して、動的畳み込みと空間的注意を活用してさまざまな領域の周波数成分を適応的に復元することにより、領域適応周波数集約(RFA)モジュールをさらに設計します。広範な実験は、RealSR用のOR-Netの効果的でシナリオにとらわれない性質を裏付けています。
Traditional single image super-resolution (SISR) methods that focus on solving single and uniform degradation (i.e., bicubic down-sampling), typically suffer from poor performance when applied into real-world low-resolution (LR) images due to the complicated realistic degradations. The key to solving this more challenging real image super-resolution (RealSR) problem lies in learning feature representations that are both informative and content-aware. In this paper, we propose an Omni-frequency Region-adaptive Network (ORNet) to address both challenges, here we call features of all low, middle and high frequencies omni-frequency features. Specifically, we start from the frequency perspective and design a Frequency Decomposition (FD) module to separate different frequency components to comprehensively compensate the information lost for real LR image. Then, considering the different regions of real LR image have different frequency information lost, we further design a Region-adaptive Frequency Aggregation (RFA) module by leveraging dynamic convolution and spatial attention to adaptively restore frequency components for different regions. The extensive experiments endorse the effective, and scenario-agnostic nature of our OR-Net for RealSR.
updated: Fri Dec 11 2020 05:17:38 GMT+0000 (UTC)
published: Fri Dec 11 2020 05:17:38 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト