arXiv reaDer
MAMNet: Multi-path Adaptive Modulation Network for Image Super-Resolution
 近年、深い畳み込みニューラルネットワーク(CNN)に基づく単一画像超解像(SR)法が大幅に進歩しました。ただし、畳み込み演算の非適応的な性質により、画像のさまざまな特性に適応できず、その表現能力が制限され、その結果、モデルサイズが不必要に大きくなります。この問題に対処するために、新しいマルチパス適応変調ネットワーク(MAMNet)を提案します。具体的には、マルチパス適応変調ブロック(MAMB)を提案します。MAMBは、3つのパスを介して情報を完全に活用することで残差特徴応答を適応的に変調する軽量で効果的な残差ブロックです。 3つのパスは、SRに適した3種類の情報をモデル化します。1)グローバル分散プーリングを使用したチャネル固有情報(CSI)、2)CSIに基づくチャネル間依存関係(ICD)、3)およびチャネル固有の空間依存関係(CSD) )深さ方向の畳み込みによる。提案されたMAMBが他の機能変調方法よりも画像SRに対して効果的でパラメータ効率が良いことを示します。さらに、実験結果は、私たちのMAMNetが比較的少数のパラメーターで最新のメソッドのほとんどよりも優れていることを示しています。
In recent years, single image super-resolution (SR) methods based on deep convolutional neural networks (CNNs) have made significant progress. However, due to the non-adaptive nature of the convolution operation, they cannot adapt to various characteristics of images, which limits their representational capability and, consequently, results in unnecessarily large model sizes. To address this issue, we propose a novel multi-path adaptive modulation network (MAMNet). Specifically, we propose a multi-path adaptive modulation block (MAMB), which is a lightweight yet effective residual block that adaptively modulates residual feature responses by fully exploiting their information via three paths. The three paths model three types of information suitable for SR: 1) channel-specific information (CSI) using global variance pooling, 2) inter-channel dependencies (ICD) based on the CSI, 3) and channel-specific spatial dependencies (CSD) via depth-wise convolution. We demonstrate that the proposed MAMB is effective and parameter-efficient for image SR than other feature modulation methods. In addition, experimental results show that our MAMNet outperforms most of the state-of-the-art methods with a relatively small number of parameters.
updated: Fri Mar 27 2020 09:11:34 GMT+0000 (UTC)
published: Thu Nov 29 2018 09:59:31 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト