arXiv reaDer
軽量のマルチインフォメーションフュージョンネットワークに基づく画像のブレ除去
Image deblurring based on lightweight multi-information fusion network
最近、深層学習ベースの画像ブレ除去が十分に開発されました。ただし、ディープラーニングフレームワークで詳細な画像機能を利用するには、常に大量のパラメータが必要であり、必然的にネットワークに高い計算負荷がかかります。この問題を解決するために、画像のぼけ除去用の軽量マルチインフォメーションフュージョンネットワーク(LMFN)を提案します。提案されたLMFNは、エンコーダ-デコーダアーキテクチャとして設計されています。エンコード段階では、画像の特徴は、大量の情報を失うことなく、マルチスケールの情報抽出と融合のためにさまざまな小規模なスペースに縮小されます。次に、蒸留ネットワークがデコード段階で使用されます。これにより、ネットワークは十分に軽量でありながら、残余学習から最大の利益を得ることができます。一方、蒸留モジュールと機能チャネル間の情報融合戦略も注意メカニズムによって実行されます。提案されたアプローチでさまざまな情報を融合することにより、私たちのネットワークは、より少ない数のパラメーターで最先端の画像ぼけ除去結果を達成し、モデルの複雑さにおいて既存の方法を上回ります。
Recently, deep learning based image deblurring has been well developed. However, exploiting the detailed image features in a deep learning framework always requires a mass of parameters, which inevitably makes the network suffer from high computational burden. To solve this problem, we propose a lightweight multiinformation fusion network (LMFN) for image deblurring. The proposed LMFN is designed as an encoder-decoder architecture. In the encoding stage, the image feature is reduced to various smallscale spaces for multi-scale information extraction and fusion without a large amount of information loss. Then, a distillation network is used in the decoding stage, which allows the network benefit the most from residual learning while remaining sufficiently lightweight. Meanwhile, an information fusion strategy between distillation modules and feature channels is also carried out by attention mechanism. Through fusing different information in the proposed approach, our network can achieve state-of-the-art image deblurring result with smaller number of parameters and outperforms existing methods in model complexity.
updated: Thu Jan 14 2021 00:37:37 GMT+0000 (UTC)
published: Thu Jan 14 2021 00:37:37 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト