arXiv reaDer
WEDGE: セマンティック セグメンテーションのための Web-Image Assisted Domain Generalization
WEDGE: Web-Image Assisted Domain Generalization for Semantic Segmentation
セマンティック セグメンテーションのためのドメインの一般化は、トレーニング済みのモデルがこれまでにないドメインでうまく機能することが期待される実際のアプリケーションで非常に要求されます。課題の 1 つは、トレーニング用の目に見えない可能性のあるドメインの多様な分布をカバーできるデータが不足していることにあります。この論文では、一般化可能なセマンティックセグメンテーションのためにWebクロールされた画像の多様性を初めて利用する、WEB画像支援ドメインジェネラル化(WEDGE)スキームを提案します。現実世界のデータ分布を調査して活用するために、気象条件、場所、照明、カメラ スタイルなどの点で大きな多様性を示す Web クロールされた画像を収集します。また、Web クロールされた画像のスタイルを挿入する方法も提示します。トレーニング中にオンザフライでトレーニング画像に変換します。これにより、ネットワークは、効果的なトレーニングのための信頼できるラベルを使用して、さまざまなスタイルの画像を体験できます。さらに、ネットワークの機能をさらに強化するために、トレーニング用の予測された疑似ラベルを含む Web クロールされた画像を使用します。広範な実験により、私たちの方法が既存のドメイン一般化手法よりも明らかに優れていることが示されています。
Domain generalization for semantic segmentation is highly demanded in real applications, where a trained model is expected to work well in previously unseen domains. One challenge lies in the lack of data which could cover the diverse distributions of the possible unseen domains for training. In this paper, we propose a WEb-image assisted Domain GEneralization (WEDGE) scheme, which is the first to exploit the diversity of web-crawled images for generalizable semantic segmentation. To explore and exploit the real-world data distributions, we collect web-crawled images which present large diversity in terms of weather conditions, sites, lighting, camera styles, etc. We also present a method which injects styles of the web-crawled images into training images on-the-fly during training, which enables the network to experience images of diverse styles with reliable labels for effective training. Moreover, we use the web-crawled images with their predicted pseudo labels for training to further enhance the capability of the network. Extensive experiments demonstrate that our method clearly outperforms existing domain generalization techniques.
updated: Tue May 02 2023 05:59:19 GMT+0000 (UTC)
published: Wed Sep 29 2021 05:19:58 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト