arXiv reaDer
Constructing Self-motivated Pyramid Curriculums for Cross-Domain Semantic Segmentation: A Non-Adversarial Approach
  合成ソースドメインから実際のターゲットドメインへのセマンティックセグメンテーションニューラルネットワークの適応を促進するために、自発的ピラミッドカリキュラムドメイン適応(PyCDA)と呼ばれる新しいアプローチを提案します。私たちのアプローチは、カリキュラム領域の適応と自己訓練という2つの既存の成果を結び付ける洞察に基づいています。前者に触発されて、PyCDAは、ターゲットドメインに関するさまざまなプロパティを含むピラミッドカリキュラムを構築します。これらのプロパティは、主に、ターゲットドメインの画像、画像領域、およびピクセルにわたる望ましいラベル分布に関するものです。セグメンテーションニューラルネットワークにこれらのプロパティを観察させることにより、ターゲットドメインへのネットワークの一般化機能を改善できます。自己訓練によって動機付けられ、セマンティックセグメンテーションネットワーク自体に頼ることにより、このピラミッドプロパティを推測します。従来の作業とは異なり、追加のモデル(ロジスティック回帰または判別ネットワークなど)を維持したり、最適化が難しいことが多いminmax問題を解決したりする必要はありません。 GTAVとSYNTHIAの両方からCityscapesへの適応の最新の結果を報告します。これは、セマンティックセグメンテーション用の教師なしドメイン適応の2つの一般的な設定です。
We propose a new approach, called self-motivated pyramid curriculum domain adaptation (PyCDA), to facilitate the adaptation of semantic segmentation neural networks from synthetic source domains to real target domains. Our approach draws on an insight connecting two existing works: curriculum domain adaptation and self-training. Inspired by the former, PyCDA constructs a pyramid curriculum which contains various properties about the target domain. Those properties are mainly about the desired label distributions over the target domain images, image regions, and pixels. By enforcing the segmentation neural network to observe those properties, we can improve the network's generalization capability to the target domain. Motivated by the self-training, we infer this pyramid of properties by resorting to the semantic segmentation network itself. Unlike prior work, we do not need to maintain any additional models (e.g., logistic regression or discriminator networks) or to solve minmax problems which are often difficult to optimize. We report state-of-the-art results for the adaptation from both GTAV and SYNTHIA to Cityscapes, two popular settings in unsupervised domain adaptation for semantic segmentation.
updated: Mon Aug 26 2019 09:16:17 GMT+0000 (UTC)
published: Mon Aug 26 2019 09:16:17 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト