エイリアシング領域からテクスチャ情報を回復することは、単一画像超解像(SISR)タスクにとって常に大きな課題でした。これらの領域はノイズに沈むことが多いため、ノイズを抑えながらテクスチャの詳細を復元する必要があります。この問題に対処するために、Avgpool Channel Attention Module(ACAM)とMaxpool Spatial Attention Module(MSAM)を並行して構成するBalanced Attention Mechanism(BAM)を提案します。 ACAMは、MSAMが高周波テクスチャの詳細を保持しながら、大規模なフィーチャマップの極端なノイズを抑制するように設計されています。並列構造のおかげで、これら2つのモジュールは自己最適化を実行するだけでなく、相互最適化も実行して、バックプロパゲーションプロセス中のノイズリダクションと高周波テクスチャ復元のバランスを取得します。並列構造により、推論が高速になります。 BAMの有効性と堅牢性を検証するために、BAMを10のSOTASISRネットワークに適用しました。結果は、BAMがネットワークパフォーマンスを効率的に改善できることを示しており、元々注意メカニズムを備えていた場合、BAMに置き換えると、パラメーターの量がさらに減少し、推論速度が向上します。さらに、realSR7という名前の実際のシーンの豊富なテクスチャエイリアシング領域を持つデータセットを提示します。実験により、BAMがエイリアシング領域でより優れた超解像結果を達成することが証明されています。
Recovering texture information from the aliasing regions has always been a major challenge for Single Image Super Resolution (SISR) task. These regions are often submerged in noise so that we have to restore texture details while suppressing noise. To address this issue, we propose a Balanced Attention Mechanism (BAM), which consists of Avgpool Channel Attention Module (ACAM) and Maxpool Spatial Attention Module (MSAM) in parallel. ACAM is designed to suppress extreme noise in the large scale feature maps while MSAM preserves high-frequency texture details. Thanks to the parallel structure, these two modules not only conduct self-optimization, but also mutual optimization to obtain the balance of noise reduction and high-frequency texture restoration during the back propagation process, and the parallel structure makes the inference faster. To verify the effectiveness and robustness of BAM, we applied it to 10 SOTA SISR networks. The results demonstrate that BAM can efficiently improve the networks performance, and for those originally with attention mechanism, the substitution with BAM further reduces the amount of parameters and increases the inference speed. Moreover, we present a dataset with rich texture aliasing regions in real scenes, named realSR7. Experiments prove that BAM achieves better super-resolution results on the aliasing area.