畳み込みニューラルネットワーク(CNN)に基づく現在の画像超解像(SR)手法のほとんどは、ネットワーク構造設計で残差学習を使用します。これにより、効果的なバックプロパゲーションが可能になり、モデルのスケールが大きくなることでSRのパフォーマンスが向上します。ただし、残差ネットワークは、モデル容量の完全な活用を妨げるIDパスを導入することにより、表現の冗長性に悩まされます。さらに、ネットワークスケールを盲目的に拡大すると、残余学習があっても、モデルトレーニングでより多くの問題が発生する可能性があります。この論文では、すべての層間スキップが単純で直接的な操作、すなわち加重チャネル連結(WCC)によって実装される、深いモデルの表現能力のさらなるマイニングを行うために、新しい完全にチャネル連結されたネットワーク(FC ^ 2N)が提示されます。 )、1×1のconvレイヤーが続きます。 WCCに基づいて、このモデルはネットワーク内の線形および非線形機能の共同注意メカニズムを実現でき、モデルパラメーターが少ない他の最先端のSRモデルよりも優れたパフォーマンスを発揮します。私たちの知る限り、FC ^ 2Nは、残差学習を使用せず、400層を超えるネットワーク深度に到達する最初のCNNモデルです。さらに、大規模な実装と軽量な実装の両方で優れたパフォーマンスを示し、モデルの表現能力を最大限に活用していることを示しています。
Most current image super-resolution (SR) methods based on convolutional neural networks (CNNs) use residual learning in network structural design, which favors to effective back propagation and hence improves SR performance by increasing model scale. However, residual networks suffer from representational redundancy by introducing identity paths that impede the full exploitation of model capacity. Besides, blindly enlarging network scale can cause more problems in model training, even with residual learning. In this paper, a novel fully channel-concatenated network (FC^2N) is presented to make further mining of representational capacity of deep models, in which all interlayer skips are implemented by a simple and straightforward operation, i.e., weighted channel concatenation (WCC), followed by a 1×1 conv layer. Based on the WCC, the model can achieve the joint attention mechanism of linear and nonlinear features in the network, and presents better performance than other state-of-the-art SR models with fewer model parameters. To our best knowledge, FC^2N is the first CNN model that does not use residual learning and reaches network depth over 400 layers. Moreover, it shows excellent performance in both largescale and lightweight implementations, which illustrates the full exploitation of the representational capacity of the model.