arXiv reaDer
ポイント派生セグメンテーションによるきめ細かいドメイン適応群集カウント
Fine-grained Domain Adaptive Crowd Counting via Point-derived Segmentation
ドメイン シフトが原因で、通常、トレーニング済みの群衆カウント モデルが実際にデプロイされると、大幅なパフォーマンスの低下が観察されます。既存のドメイン適応群衆計数法は有望な結果を達成しますが、通常、各群衆画像を全体として見なし、全体的な方法でドメインの不一致を減らすため、ドメイン適応パフォーマンスのさらなる改善が制限されます。この目的のために、ドメイン不変の群衆とドメイン固有の背景を群衆の画像から解きほぐし、群衆カウントのためのきめの細かいドメイン適応方法を設計することを提案します。具体的には、群衆を背景から解きほぐすために、ポイントレベルの群衆カウント注釈から群衆セグメンテーションを弱い教師付きの方法で学習することを提案します。派生したセグメンテーションに基づいて、2 つの群集認識適応モジュール、すなわち群集領域転送 (CRT) と群集密度アライメント (CDA) からなる群集認識ドメイン適応メカニズムを設計します。 CRT モジュールは、バックグラウンドの気晴らしを超えてドメイン間で群集機能の転送をガイドするように設計されています。 CDA モジュールは、独自の群衆密度分布によってターゲット ドメインの群衆密度生成を正則化することに専念しています。私たちの方法は、広く使用されている適応シナリオで一貫して以前のアプローチよりも優れています。
Due to domain shift, a large performance drop is usually observed when a trained crowd counting model is deployed in the wild. While existing domain-adaptive crowd counting methods achieve promising results, they typically regard each crowd image as a whole and reduce domain discrepancies in a holistic manner, thus limiting further improvement of domain adaptation performance. To this end, we propose to untangle domain-invariant crowd and domain-specific background from crowd images and design a fine-grained domain adaption method for crowd counting. Specifically, to disentangle crowd from background, we propose to learn crowd segmentation from point-level crowd counting annotations in a weakly-supervised manner. Based on the derived segmentation, we design a crowd-aware domain adaptation mechanism consisting of two crowd-aware adaptation modules, i.e., Crowd Region Transfer (CRT) and Crowd Density Alignment (CDA). The CRT module is designed to guide crowd features transfer across domains beyond background distractions. The CDA module dedicates to regularising target-domain crowd density generation by its own crowd density distribution. Our method outperforms previous approaches consistently in the widely-used adaptation scenarios.
updated: Fri Mar 31 2023 12:02:10 GMT+0000 (UTC)
published: Fri Aug 06 2021 07:16:48 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト