arXiv reaDer
混合クラス分布メトリックに基づくセマンティック整合性機能アライメントオブジェクト検出モデル
A Semantic Consistency Feature Alignment Object Detection Model Based on Mixed-Class Distribution Metrics
教師なしドメインの適応は、オブジェクト検出、インスタンスのセグメンテーションなど、さまざまなコンピュータービジョンタスクで重要です。これらは、モデルのアプリケーション速度を向上させながら、ドメインバイアスによって引き起こされるパフォーマンスの低下を軽減しようとします。ドメイン適応オブジェクト検出の以前の作業では、画像レベルとインスタンスレベルのシフトを調整して、最終的にドメインの不一致を最小限に抑えようとしますが、オブジェクト内の各画像が原因で、画像レベルのドメイン適応で単一クラスの機能を混合クラスの機能に調整する場合があります検出タスクは、複数のクラスとオブジェクトである可能性があります。単一クラスアラインメントを使用した単一クラスと混合クラスアラインメントを使用した混合クラスを実現するために、フィーチャの混合クラスを新しいクラスとして扱い、オブジェクト検出のための混合クラスH発散を提案して均質性を実現します。機能の調整と負の転送の削減。次に、混合クラスのH発散に基づくセマンティック整合性機能アライメントモデル(SCFAM)も提示されました。単一クラスおよび混合クラスのセマンティック情報を改善し、セマンティック分離を実現するために、SCFAMモデルはセマンティック予測モデル(SPM)とセマンティックブリッジングコンポーネント(SBC)を提案します。そして、サンプルの不均衡を減らすために、SPMの結果に基づいてpixドメイン弁別器の損失の重みが変更されます。広く使用されているデータセットでの広範な教師なしドメイン適応実験は、ドメインバイアス設定での提案されたアプローチの堅牢なオブジェクト検出を示しています。
Unsupervised domain adaptation is critical in various computer vision tasks, such as object detection, instance segmentation, etc. They attempt to reduce domain bias-induced performance degradation while also promoting model application speed. Previous works in domain adaptation object detection attempt to align image-level and instance-level shifts to eventually minimize the domain discrepancy, but they may align single-class features to mixed-class features in image-level domain adaptation because each image in the object detection task may be more than one class and object. In order to achieve single-class with single-class alignment and mixed-class with mixed-class alignment, we treat the mixed-class of the feature as a new class and propose a mixed-classes H-divergence for object detection to achieve homogenous feature alignment and reduce negative transfer. Then, a Semantic Consistency Feature Alignment Model (SCFAM) based on mixed-classes H-divergence was also presented. To improve single-class and mixed-class semantic information and accomplish semantic separation, the SCFAM model proposes Semantic Prediction Models (SPM) and Semantic Bridging Components (SBC). And the weight of the pix domain discriminator loss is then changed based on the SPM result to reduce sample imbalance. Extensive unsupervised domain adaption experiments on widely used datasets illustrate our proposed approach's robust object detection in domain bias settings.
updated: Sun Jun 12 2022 15:14:45 GMT+0000 (UTC)
published: Sun Jun 12 2022 15:14:45 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト