arXiv reaDer
ML-BPM:セマンティックセグメンテーションにおけるオープンコンパウンドドメイン適応のための双方向測光ミキシングによるマルチティーチャーラーニング
ML-BPM: Multi-teacher Learning with Bidirectional Photometric Mixing for Open Compound Domain Adaptation in Semantic Segmentation
オープンコンパウンドドメインアダプテーション(OCDA)は、ターゲットドメインを複数の未知の同種サブドメインのコンパウンドと見なします。 OCDAの目標は、ラベル付きソースドメインとラベルなし複合ターゲットドメイン間のドメインギャップを最小限に抑えることです。これにより、モデルを非表示ドメインに一般化することができます。セマンティックセグメンテーション方法の現在のOCDAは、手動ドメイン分離を採用し、単一のモデルを使用して、すべてのターゲットサブドメインに同時に適応します。ただし、ターゲットサブドメインに適応すると、モデルが他の異なるターゲットサブドメインに適応できなくなり、パフォーマンスが制限される可能性があります。この作業では、すべてのターゲットサブドメインに個別に適応するために、双方向測光ミキシングを備えたマルチティーチャーフレームワークを紹介します。まず、最適な数のサブドメインを見つけるための自動ドメイン分離を紹介します。これに基づいて、各教師モデルが双方向の測光ミキシングを使用して1つのターゲットサブドメインに適応するマルチ教師フレームワークを提案します。さらに、適応蒸留を実行して学生モデルを学習し、一貫性の正則化を適用して学生の一般化を改善します。ベンチマークデータセットの実験結果は、既存の最先端のアプローチに対する複合ドメインとオープンドメインの両方に対して提案されたアプローチの有効性を示しています。
Open compound domain adaptation (OCDA) considers the target domain as the compound of multiple unknown homogeneous subdomains. The goal of OCDA is to minimize the domain gap between the labeled source domain and the unlabeled compound target domain, which benefits the model generalization to the unseen domains. Current OCDA for semantic segmentation methods adopt manual domain separation and employ a single model to simultaneously adapt to all the target subdomains. However, adapting to a target subdomain might hinder the model from adapting to other dissimilar target subdomains, which leads to limited performance. In this work, we introduce a multi-teacher framework with bidirectional photometric mixing to separately adapt to every target subdomain. First, we present an automatic domain separation to find the optimal number of subdomains. On this basis, we propose a multi-teacher framework in which each teacher model uses bidirectional photometric mixing to adapt to one target subdomain. Furthermore, we conduct an adaptive distillation to learn a student model and apply consistency regularization to improve the student generalization. Experimental results on benchmark datasets show the efficacy of the proposed approach for both the compound domain and the open domains against existing state-of-the-art approaches.
updated: Tue Jul 19 2022 03:30:48 GMT+0000 (UTC)
published: Tue Jul 19 2022 03:30:48 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト