arXiv reaDer
単一画像のドレインのための方向認識機能レベル周波数分解
Direction-aware Feature-level Frequency Decomposition for Single Image Deraining
単一画像のドレインのための新しい方向認識機能レベル周波数分解ネットワークを提示します。既存のソリューションと比較して、提案されたネットワークには3つの魅力的な特性があります。まず、以前のアルゴリズムとは異なり、画像レベルではなく機能レベルで周波数分解を実行することを提案します。これにより、構造を含む低周波数マップと詳細を含む高周波数マップの両方をトレーニング手順中に継続的に改良できます。次に、低周波マップと高周波マップ間の通信チャネルをさらに確立して、高周波マップから構造をインタラクティブにキャプチャし、それらを低周波マップに追加し、同時に、低周波マップから詳細を抽出して送り返します。高周波マップに変換することで、入力画像のより繊細な特徴を維持しながら、雨の筋を取り除きます。第3に、すべての方向で一貫性のある畳み込みフィルターを使用する既存のアルゴリズムとは異なり、雨の筋の入力画像をより効果的かつ完全にパージするために、雨の筋の方向をキャプチャする方向認識フィルターを提案します。 3つの代表的なデータセットで提案されたアプローチを広範囲に評価し、実験結果は、私たちのアプローチが常に最先端の排水アルゴリズムを上回っていることを裏付けています。
We present a novel direction-aware feature-level frequency decomposition network for single image deraining. Compared with existing solutions, the proposed network has three compelling characteristics. First, unlike previous algorithms, we propose to perform frequency decomposition at feature-level instead of image-level, allowing both low-frequency maps containing structures and high-frequency maps containing details to be continuously refined during the training procedure. Second, we further establish communication channels between low-frequency maps and high-frequency maps to interactively capture structures from high-frequency maps and add them back to low-frequency maps and, simultaneously, extract details from low-frequency maps and send them back to high-frequency maps, thereby removing rain streaks while preserving more delicate features in the input image. Third, different from existing algorithms using convolutional filters consistent in all directions, we propose a direction-aware filter to capture the direction of rain streaks in order to more effectively and thoroughly purge the input images of rain streaks. We extensively evaluate the proposed approach in three representative datasets and experimental results corroborate our approach consistently outperforms state-of-the-art deraining algorithms.
updated: Tue Jun 15 2021 07:51:19 GMT+0000 (UTC)
published: Tue Jun 15 2021 07:51:19 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト