arXiv reaDer
Road Scenes Segmentation Across Different Domains by Disentangling Latent Representations
深層学習モデルは、道路シーンの理解において印象的な精度を実現しますが、トレーニングには大量のラベル付きサンプルが必要です。さらに、このようなモデルは、データの統計的特性がトレーニングシーンの統計的特性と完全に一致しない環境にうまく一般化されないため、これはインテリジェント車両にとって重大な問題になる可能性があります。したがって、ドメイン適応アプローチは、ラベルが豊富なソースドメインで取得した知識を関連するラベルが不足しているターゲットドメインに転送するために導入されました。この作業では、ドメインシフトを減らすために連携する複数の潜在的な空間形成正則化戦略を設計し、注意深く分析します。より詳細には、ドメインアラインメントを増やすための機能クラスタリング戦略、現在のバッチに存在しないものを含む、異なるセマンティッククラスに属する機能を離して配置するための機能垂直制約、およびアクティブチャネルと非アクティブチャネルを分離するための機能ノルムアラインメント戦略を考案します。 。さらに、教師ありトレーニングに関して適応モデルの相対的なパフォーマンスをキャプチャするための新しい評価メトリックを提案します。合成から現実への適応と現実から現実への適応の両方を考慮して、運転シナリオのフレームワークを検証し、複数の道路シーンのベンチマークで以前の機能レベルの最先端の方法を上回ります。
Deep learning models obtain impressive accuracy in road scenes understanding, however they need a large quantity of labeled samples for their training. Additionally, such models do not generalize well to environments where the statistical properties of data do not perfectly match those of training scenes, and this can be a significant problem for intelligent vehicles. Hence, domain adaptation approaches have been introduced to transfer knowledge acquired on a label-abundant source domain to a related label-scarce target domain. In this work, we design and carefully analyze multiple latent space-shaping regularization strategies that work together to reduce the domain shift. More in detail, we devise a feature clustering strategy to increase domain alignment, a feature perpendicularity constraint to space apart features belonging to different semantic classes, including those not present in the current batch, and a feature norm alignment strategy to separate active and inactive channels. In addition, we propose a novel evaluation metric to capture the relative performance of an adapted model with respect to supervised training. We validate our framework in driving scenarios, considering both synthetic-to-real and real-to-real adaptation, outperforming previous feature-level state-of-the-art methods on multiple road scenes benchmarks.
updated: Sun Oct 24 2021 09:39:50 GMT+0000 (UTC)
published: Fri Aug 06 2021 09:43:07 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト