arXiv reaDer
セマンティック セグメンテーションのドメイン適応のためのしきい値適応教師なしフォーカル ロス
Threshold-adaptive Unsupervised Focal Loss for Domain Adaptation of Semantic Segmentation
セマンティック セグメンテーションは、インテリジェント ビークルが環境を理解するための重要なタスクです。現在のディープ ラーニング手法では、トレーニングのために大量のラベル付きデータが必要です。手動の注釈は高価ですが、シミュレーターは正確な注釈を提供できます。ただし、シミュレーターのデータでトレーニングされたセマンティック セグメンテーション モデルのパフォーマンスは、実際のシーンに適用すると大幅に低下します。セマンティック セグメンテーションのための教師なしドメイン適応 (UDA) は、ドメイン ギャップを減らし、ターゲット ドメインでのパフォーマンスを向上させることを目的として、最近研究の注目を集めています。この論文では、セマンティックセグメンテーションのための新しい2段階エントロピーベースのUDA方法を提案します。ステージ 1 では、ターゲット ドメインでの予測を正則化するために、しきい値適応型の教師なしフォーカル ロスを設計します。ステージ 2 では、クロスドメイン イメージ ミキシング (CIM) という名前のデータ拡張手法を導入して、2 つのドメインからのセマンティック ナレッジを橋渡しします。私たちの方法は、DeepLabV2 を使用して SYNTHIA-to-Cityscapes および GTA5-to-Cityscapes で最先端の 58.4% および 59.6% の mIoU を達成し、軽量 BiSeNet を使用して競争力のあるパフォーマンスを達成します。
Semantic segmentation is an important task for intelligent vehicles to understand the environment. Current deep learning methods require large amounts of labeled data for training. Manual annotation is expensive, while simulators can provide accurate annotations. However, the performance of the semantic segmentation model trained with the data of the simulator will significantly decrease when applied in the actual scene. Unsupervised domain adaptation (UDA) for semantic segmentation has recently gained increasing research attention, aiming to reduce the domain gap and improve the performance on the target domain. In this paper, we propose a novel two-stage entropy-based UDA method for semantic segmentation. In stage one, we design a threshold-adaptative unsupervised focal loss to regularize the prediction in the target domain, which has a mild gradient neutralization mechanism and mitigates the problem that hard samples are barely optimized in entropy-based methods. In stage two, we introduce a data augmentation method named cross-domain image mixing (CIM) to bridge the semantic knowledge from two domains. Our method achieves state-of-the-art 58.4% and 59.6% mIoUs on SYNTHIA-to-Cityscapes and GTA5-to-Cityscapes using DeepLabV2 and competitive performance using the lightweight BiSeNet.
updated: Tue Aug 23 2022 03:48:48 GMT+0000 (UTC)
published: Tue Aug 23 2022 03:48:48 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト