arXiv reaDer
WEDGE:セマンティックセグメンテーションのためのWeb画像支援ドメイン一般化
WEDGE: Web-Image Assisted Domain Generalization for Semantic Segmentation
セマンティックセグメンテーションのためのドメインの一般化は、トレーニングされたモデルが以前は見られなかったドメインでうまく機能することが期待される実際のアプリケーションで非常に要求されます。 1つの課題は、トレーニングのために考えられる目に見えないドメインの多様な分布をカバーできるデータの欠如にあります。この論文では、WEb画像支援ドメイン一般化(WEDGE)スキームを提案します。これは、一般化可能なセマンティックセグメンテーションのためにWebクロールされた画像の多様性を利用した最初のスキームです。実世界のデータ分布を調査して活用するために、気象条件、サイト、照明、カメラスタイルなどの点で大きな多様性を示す、Webでクロールされたデータセットを収集します。また、Webのスタイル表現を挿入する方法も示します。 -トレーニング中にオンザフライでソースドメインにデータをクロールしました。これにより、ネットワークは、効果的なトレーニングのための信頼できるラベルを使用して、さまざまなスタイルの画像を体験できます。さらに、ネットワークの機能をさらに強化するために、トレーニング用に予測された疑似ラベルを使用してWebクロールされたデータセットを使用します。広範な実験は、私たちの方法が既存のドメイン一般化手法を明らかに上回っていることを示しています。
Domain generalization for semantic segmentation is highly demanded in real applications, where a trained model is expected to work well in previously unseen domains. One challenge lies in the lack of data which could cover the diverse distributions of the possible unseen domains for training. In this paper, we propose a WEb-image assisted Domain GEneralization (WEDGE) scheme, which is the first to exploit the diversity of web-crawled images for generalizable semantic segmentation. To explore and exploit the real-world data distributions, we collect a web-crawled dataset which presents large diversity in terms of weather conditions, sites, lighting, camera styles, etc. We also present a method which injects the style representation of the web-crawled data into the source domain on-the-fly during training, which enables the network to experience images of diverse styles with reliable labels for effective training. Moreover, we use the web-crawled dataset with predicted pseudo labels for training to further enhance the capability of the network. Extensive experiments demonstrate that our method clearly outperforms existing domain generalization techniques.
updated: Fri Aug 19 2022 08:45:36 GMT+0000 (UTC)
published: Wed Sep 29 2021 05:19:58 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト