arXiv reaDer
実世界の画像の曇り除去のためのソースフリードメイン適応
Source-Free Domain Adaptation for Real-world Image Dehazing
合成データセットでトレーニングされたディープラーニングベースのソースデヘイズ方法は、驚くべきパフォーマンスを達成しましたが、ドメインシフトによる実際のかすんでいる画像の劇的なパフォーマンス低下に悩まされています。特定のドメイン適応(DA)デヘイズ方法が提示されていますが、ソース合成ドメインとターゲット実ドメインの間のギャップを減らすために、必然的にソースデータセットへのアクセスが必要になります。これらの問題に対処するために、十分に訓練されたソースモデルとラベルのないターゲットの実際のかすんでいるデータセットのみが利用できる、新しいソースフリー教師なしドメイン適応(SFUDA)画像のヘイズ除去パラダイムを提示します。具体的には、ドメイン表現の正規化(DRN)モジュールを考案して、実際のぼんやりとしたドメイン機能の表現を合成ドメインの表現と一致させ、ギャップを埋めます。プラグアンドプレイDRNモジュールを使用すると、ラベルのない実際のぼんやりとした画像は、既存の十分にトレーニングされたソースネットワークに適応できます。さらに、教師なし損失は、周波数損失と物理的な事前損失で構成されるDRNモジュールの学習をガイドするために適用されます。周波数損失は構造とスタイルの制約を提供しますが、以前の損失はヘイズのない画像に固有の統計的特性を調査します。 DRNモジュールと教師なし損失を備えた既存のソースデヘイズモデルは、ラベルのない実際のかすんでいる画像をデヘイズすることができます。複数のベースラインでの広範な実験は、視覚的および定量的に私たちの方法の有効性と優位性を示しています。
Deep learning-based source dehazing methods trained on synthetic datasets have achieved remarkable performance but suffer from dramatic performance degradation on real hazy images due to domain shift. Although certain Domain Adaptation (DA) dehazing methods have been presented, they inevitably require access to the source dataset to reduce the gap between the source synthetic and target real domains. To address these issues, we present a novel Source-Free Unsupervised Domain Adaptation (SFUDA) image dehazing paradigm, in which only a well-trained source model and an unlabeled target real hazy dataset are available. Specifically, we devise the Domain Representation Normalization (DRN) module to make the representation of real hazy domain features match that of the synthetic domain to bridge the gaps. With our plug-and-play DRN module, unlabeled real hazy images can adapt existing well-trained source networks. Besides, the unsupervised losses are applied to guide the learning of the DRN module, which consists of frequency losses and physical prior losses. Frequency losses provide structure and style constraints, while the prior loss explores the inherent statistic property of haze-free images. Equipped with our DRN module and unsupervised loss, existing source dehazing models are able to dehaze unlabeled real hazy images. Extensive experiments on multiple baselines demonstrate the validity and superiority of our method visually and quantitatively.
updated: Thu Jul 14 2022 03:37:25 GMT+0000 (UTC)
published: Thu Jul 14 2022 03:37:25 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト