arXiv reaDer
自己監視コンテンツスタイル解きほぐしによる密度を意識したヘイズ画像合成
Density-aware Haze Image Synthesis by Self-Supervised Content-Style Disentanglement
敵対的訓練によるヘイズ画像翻訳の重要な手順は、ヘイズ合成にのみ関与する特徴、すなわちスタイル特徴と、不変のセマンティックコンテンツを表す特徴、すなわちコンテンツ特徴との間の解きほぐしにある。以前の方法では、トレーニングプロセス中にヘイズ画像を分類するためにコンテンツ機能を利用することで、コンテンツ機能を分離していました。しかし、この論文では、そのような技術的ルーチンにおけるコンテンツスタイルの解きほぐしの不完全さを認識しています。コンテンツ情報と絡み合った欠陥のあるスタイル機能は、必然的にヘイズ画像の不適切なレンダリングにつながります。対処するために、確率的線形補間を介して自己監視型スタイル回帰を提案し、スタイル機能のコンテンツ情報を削減します。アブレーション実験は、レベルを意識したヘイズ画像合成における解きほぐしの完全性とその優位性を示しています。さらに、生成されたヘイズデータは、車両検出器のテストの一般化に適用されます。ヘイズレベルと検出性能の間のさらなる研究は、ヘイズが車両検出器の一般化に明らかな影響を及ぼし、そのような性能低下レベルがヘイズレベルと線形相関し、それが提案された方法の有効性を検証することを示しています。
The key procedure of haze image translation through adversarial training lies in the disentanglement between the feature only involved in haze synthesis, i.e.style feature, and the feature representing the invariant semantic content, i.e. content feature. Previous methods separate content feature apart by utilizing it to classify haze image during the training process. However, in this paper we recognize the incompleteness of the content-style disentanglement in such technical routine. The flawed style feature entangled with content information inevitably leads the ill-rendering of the haze images. To address, we propose a self-supervised style regression via stochastic linear interpolation to reduce the content information in style feature. The ablative experiments demonstrate the disentangling completeness and its superiority in level-aware haze image synthesis. Moreover, the generated haze data are applied in the testing generalization of vehicle detectors. Further study between haze-level and detection performance shows that haze has obvious impact on the generalization of the vehicle detectors and such performance degrading level is linearly correlated to the haze-level, which, in turn, validates the effectiveness of the proposed method.
updated: Thu Nov 25 2021 12:04:35 GMT+0000 (UTC)
published: Thu Mar 11 2021 06:53:18 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト