arXiv reaDer
GridDehazeNet +:単一画像の曇り除去のためのタスク内知識転送を備えた拡張マルチスケールネットワーク
GridDehazeNet+: An Enhanced Multi-Scale Network with Intra-Task Knowledge Transfer for Single Image Dehazing
単一画像の曇り除去のために、GridDehazeNet +と呼ばれる拡張マルチスケールネットワークを提案します。これは、前処理、バックボーン、および後処理の3つのモジュールで構成されています。トレーニング可能な前処理モジュールは、手動で選択された前処理方法によって生成された派生入力と比較して、より優れた多様性とより適切な機能を備えた学習入力を生成できます。バックボーンモジュールは、2つの主要な機能強化を備えたマルチスケール推定を実装します。1)異なるスケール間の密な接続を介してボトルネックの問題を効果的に軽減する新しいグリッド構造。 2)デヘイズ関連の特徴を統合することによって適応融合を容易にすることができる空間チャネル注意ブロック。後処理モジュールは、最終出力のアーティファクトを減らすのに役立ちます。ネットワークトレーニングとテストの間のドメインシフトを軽減するために、合成データを、実際のデータの分布と一致するように形成された分布を持つ、いわゆる変換されたデータに変換します。さらに、実際のシナリオでの曇り除去のパフォーマンスをさらに向上させるために、合成データから抽出された知識を活用して翻訳されたデータの学習プロセスを支援する、新しいタスク内知識転送メカニズムを提案します。実験結果は、提案されたGridDehazeNet +が、いくつかの曇り除去ベンチマークで最先端の方法よりも優れていることを示しています。提案されたデヘイズ方法は大気散乱モデルに依存せず、合成画像のデヘイズ結果のみが関係している場合でも、このモデルによって提供される次元削減を利用することが必ずしも有益ではない理由について考えられる説明を提供します。 。
We propose an enhanced multi-scale network, dubbed GridDehazeNet+, for single image dehazing. It consists of three modules: pre-processing, backbone, and post-processing. The trainable pre-processing module can generate learned inputs with better diversity and more pertinent features as compared to those derived inputs produced by hand-selected pre-processing methods. The backbone module implements multi-scale estimation with two major enhancements: 1) a novel grid structure that effectively alleviates the bottleneck issue via dense connections across different scales; 2) a spatial-channel attention block that can facilitate adaptive fusion by consolidating dehazing-relevant features. The post-processing module helps to reduce the artifacts in the final output. To alleviate domain shift between network training and testing, we convert synthetic data to so-called translated data with the distribution shaped to match that of real data. Moreover, to further improve the dehazing performance in real-world scenarios, we propose a novel intra-task knowledge transfer mechanism that leverages the distilled knowledge from synthetic data to assist the learning process on translated data. Experimental results indicate that the proposed GridDehazeNet+ outperforms the state-of-the-art methods on several dehazing benchmarks. The proposed dehazing method does not rely on the atmosphere scattering model, and we provide a possible explanation as to why it is not necessarily beneficial to take advantage of the dimension reduction offered by this model, even if only the dehazing results on synthetic images are concerned.
updated: Thu Mar 25 2021 17:35:36 GMT+0000 (UTC)
published: Thu Mar 25 2021 17:35:36 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト