画像のモーションブラーは通常、動く物体や手ぶれが原因で発生します。このようなぼけは一般に方向性があり、不均一です。以前の研究努力は、自己注意を伴う自己反復マルチスケールまたはマルチパッチアーキテクチャを使用することによって不均一なぼけを解決しようとしています。ただし、自己反復フレームワークを使用すると、通常、推論時間が長くなり、ピクセル間またはチャネル間の自己注意により、メモリが過剰に使用される可能性があります。この論文は、単一のフォワードパスを介して正確で効率的なぼけ除去を達成するぼけ認識注意ネットワーク(BANet)を提案します。私たちのBANetは、マルチカーネルストリッププーリングを使用してさまざまな程度のブラーパターンを解きほぐし、カスケードされた並列拡張畳み込みを使用してマルチスケールコンテンツ機能を集約する、領域ベースの自己注意を利用します。 GoProおよびHIDEベンチマークでの広範な実験結果は、提案されたBANetが最先端のぼやけた画像の復元に対して有利に機能し、リアルタイムでぼけのない結果を提供できることを示しています。
Image motion blur usually results from moving objects or camera shakes. Such blur is generally directional and non-uniform. Previous research efforts attempt to solve non-uniform blur by using self-recurrent multi-scale or multi-patch architectures accompanying with self-attention. However, using self-recurrent frameworks typically leads to a longer inference time, while inter-pixel or inter-channel self-attention may cause excessive memory usage. This paper proposes blur-aware attention networks (BANet) that accomplish accurate and efficient deblurring via a single forward pass. Our BANet utilizes region-based self-attention with multi-kernel strip pooling to disentangle blur patterns of different degrees and with cascaded parallel dilated convolution to aggregate multi-scale content features. Extensive experimental results on the GoPro and HIDE benchmarks demonstrate that the proposed BANet performs favorably against the state-of-the-art in blurred image restoration and can provide deblurred results in realtime.