arXiv reaDer
自己教師ありコンテンツスタイル解きほぐしによるレベル認識ヘイズ画像合成
Level-aware Haze Image Synthesis by Self-Supervised Content-Style Disentanglement
敵対的訓練によるヘイズ画像変換の重要な手順は、ヘイズ合成にのみ関与する機能、つまりスタイル機能と、不変のセマンティックコンテンツを表す機能、つまりコンテンツ機能との間の解きほぐしにあります。以前の方法では、トレーニングプロセス中にヘイズ画像を分類するためにコンテンツ機能を利用することで、コンテンツ機能を分離していました。しかし、この論文では、そのような技術的ルーチンにおけるコンテンツスタイルの解きほぐしの不完全さを認識しています。コンテンツ情報と絡み合った欠陥のあるスタイル機能は、必然的にヘイズ画像の不適切なレンダリングにつながります。対処するために、確率的線形補間を介した自己教師ありスタイル回帰を提案して、スタイル機能のコンテンツ情報を削減します。アブレーション実験は、レベルを意識したヘイズ画像合成における解きほぐしの完全性とその優位性を示しています。さらに、生成されたヘイズデータは、車両検出器のテストの一般化に適用されます。ヘイズレベルと検出性能の間のさらなる研究は、ヘイズが車両検出器の一般化に明らかな影響を及ぼし、そのような性能低下レベルがヘイズレベルと線形に相関することを示し、これは次に、提案された方法の有効性を検証する。
The key procedure of haze image translation through adversarial training lies in the disentanglement between the feature only involved in haze synthesis, i.e.style feature, and the feature representing the invariant semantic content, i.e. content feature. Previous methods separate content feature apart by utilizing it to classify haze image during the training process. However, in this paper we recognize the incompleteness of the content-style disentanglement in such technical routine. The flawed style feature entangled with content information inevitably leads the ill-rendering of the haze images. To address, we propose a self-supervised style regression via stochastic linear interpolation to reduce the content information in style feature. The ablative experiments demonstrate the disentangling completeness and its superiority in level-aware haze image synthesis. Moreover, the generated haze data are applied in the testing generalization of vehicle detectors. Further study between haze-level and detection performance shows that haze has obvious impact on the generalization of the vehicle detectors and such performance degrading level is linearly correlated to the haze-level, which, in turn, validates the effectiveness of the proposed method.
updated: Thu Mar 11 2021 06:53:18 GMT+0000 (UTC)
published: Thu Mar 11 2021 06:53:18 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト