arXiv reaDer
セマンティックセグメンテーションにおけるドメイン適応のための敵対的学習および自己学習技術
Adversarial Learning and Self-Teaching Techniques for Domain Adaptation in Semantic Segmentation
 ディープラーニング技術は、都市のシーンの意味を理解するために、自動運転システムで広く使用されています。ただし、トレーニングには膨大な量のラベル付きデータが必要であり、取得が困難で費用がかかります。最近提案された回避策は、合成データを使用してディープネットワークをトレーニングすることですが、実世界と合成表現の間のドメインシフトによりパフォーマンスが制限されます。この作業では、この問題を解決するために、新しい監視なしドメイン適応(UDA)戦略が導入されています。提案された学習戦略は、3つのコンポーネントによって駆動されます。ラベル付き合成データの標準的な教師あり学習損失。ラベル付き合成データとラベルなし実データの両方を活用する敵対的学習モジュール。最後に、ラベルなしデータに適用される自己学習戦略。最後のコンポーネントは、セグメンテーションの信頼性によって導かれる地域成長フレームワークを活用します。さらに、クラス頻度に基づいてこのコンポーネントに重み付けを行い、あまり一般的でないクラスのパフォーマンスを向上させました。実験結果は、GTA5やSYNTHIAなどの合成データセットで訓練されたセグメンテーションネットワークを、CityscapesやMapillaryなどの実世界のデータセットに適応させる際の提案された戦略の有効性を証明しています。
Deep learning techniques have been widely used in autonomous driving systems for the semantic understanding of urban scenes. However, they need a huge amount of labeled data for training, which is difficult and expensive to acquire. A recently proposed workaround is to train deep networks using synthetic data, but the domain shift between real world and synthetic representations limits the performance. In this work, a novel Unsupervised Domain Adaptation (UDA) strategy is introduced to solve this issue. The proposed learning strategy is driven by three components: a standard supervised learning loss on labeled synthetic data; an adversarial learning module that exploits both labeled synthetic data and unlabeled real data; finally, a self-teaching strategy applied to unlabeled data. The last component exploits a region growing framework guided by the segmentation confidence. Furthermore, we weighted this component on the basis of the class frequencies to enhance the performance on less common classes. Experimental results prove the effectiveness of the proposed strategy in adapting a segmentation network trained on synthetic datasets, like GTA5 and SYNTHIA, to real world datasets like Cityscapes and Mapillary.
updated: Mon Mar 02 2020 15:46:24 GMT+0000 (UTC)
published: Mon Sep 02 2019 16:05:05 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト