arXiv reaDer
IDA: インフォームド ドメイン アダプティブ セマンティック セグメンテーション
IDA: Informed Domain Adaptive Semantic Segmentation
混合ベースのデータ拡張は、教師なしドメイン アダプティブ セマンティック セグメンテーション (UDA-SS) の自己トレーニング フレームワークの重要な段階であることが検証されています。 ) ドメイン。既存の自己トレーニング方法は、通常、ランダム サンプリング戦略を使用した一般的な領域ベースのミックスアップ手法を採用していますが、残念ながら、トレーニングが進行するにつれて、さまざまなドメインにわたるさまざまなセマンティクスの動的な進化が無視されます。 UDA-SS パフォーマンスを向上させるために、インフォームド ドメイン アダプテーション (IDA) モデルを提案します。これは、クラス レベルのセグメンテーション パフォーマンスに基づいてデータを混合する自己トレーニング フレームワークであり、混合時の小領域セマンティクスを強調することを目的としています。私たちの IDA モデルでは、クラスレベルのパフォーマンスは期待信頼スコア (ECS) によって追跡されます。次に、動的スケジュールを使用して、さまざまなドメインのデータの混合比率を決定します。広範な実験結果により、提案された方法は、GTA-V の都市景観への適応で 1.1 mIoU、SYNTHIA の都市景観への適応で 0.9 mIoU の差で最先端の UDA-SS 法よりも優れていることが明らかになりました。 .
Mixup-based data augmentation has been validated to be a critical stage in the self-training framework for unsupervised domain adaptive semantic segmentation (UDA-SS), which aims to transfer knowledge from a well-annotated (source) domain to an unlabeled (target) domain. Existing self-training methods usually adopt the popular region-based mixup techniques with a random sampling strategy, which unfortunately ignores the dynamic evolution of different semantics across various domains as training proceeds. To improve the UDA-SS performance, we propose an Informed Domain Adaptation (IDA) model, a self-training framework that mixes the data based on class-level segmentation performance, which aims to emphasize small-region semantics during mixup. In our IDA model, the class-level performance is tracked by an expected confidence score (ECS). We then use a dynamic schedule to determine the mixing ratio for data in different domains. Extensive experimental results reveal that our proposed method is able to outperform the state-of-the-art UDA-SS method by a margin of 1.1 mIoU in the adaptation of GTA-V to Cityscapes and of 0.9 mIoU in the adaptation of SYNTHIA to Cityscapes.
updated: Sun Mar 05 2023 18:16:34 GMT+0000 (UTC)
published: Sun Mar 05 2023 18:16:34 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト