arXiv reaDer
混合と理由: ドメインの一般化のためのデータ混合によるセマンティック トポロジーの推論
Mix and Reason: Reasoning over Semantic Topology with Data Mixing for Domain Generalization
ドメイン一般化 (DG) を使用すると、学習マシンを複数の可視ソース ドメインから不可視のターゲット ドメインに一般化できます。 DG メソッドの一般的な目的は、ドメイン ラベルに依存しないセマンティック表現を学習することです。これは、理論的には健全ですが、一般的な要因とドメイン固有の要因が複雑に混在しているため、経験的に困難です。 DG では、表現を 2 つのバラバラな部分に分離する動きが勢いを増していますが、データに対する強い推定により、多くの現実世界のシナリオでその有効性が制限されています。この論文では、意味トポロジーの構造的不変性を強制することによって意味表現を学習する新しい DG フレームワークである Mix and Reason (\mire) を提案します。 \mire\ は、2 つの主要なコンポーネント、つまり、カテゴリ認識型データ ミキシング (CDM) と適応型セマンティック トポロジー調整 (ASTR) で構成されます。 CDM は、2 つの補完的な分類損失によって生成されたアクティベーション マップのおかげで、異なるドメインからの 2 つの画像を混合し、分類子がセマンティック オブジェクトの表現に焦点を当てるようにします。 ASTR は関係グラフを導入してセマンティック トポロジを表現します。これは、ローカルの特徴集約とグローバルなクロスドメインのリレーショナル推論の間の相互作用によって徐々に洗練されます。複数の DG ベンチマークでの実験により、提案された \mire の有効性と堅牢性が検証されます。
Domain generalization (DG) enables generalizing a learning machine from multiple seen source domains to an unseen target one. The general objective of DG methods is to learn semantic representations that are independent of domain labels, which is theoretically sound but empirically challenged due to the complex mixture of common and domain-specific factors. Although disentangling the representations into two disjoint parts has been gaining momentum in DG, the strong presumption over the data limits its efficacy in many real-world scenarios. In this paper, we propose Mix and Reason (\mire), a new DG framework that learns semantic representations via enforcing the structural invariance of semantic topology. \mire\ consists of two key components, namely, Category-aware Data Mixing (CDM) and Adaptive Semantic Topology Refinement (ASTR). CDM mixes two images from different domains in virtue of activation maps generated by two complementary classification losses, making the classifier focus on the representations of semantic objects. ASTR introduces relation graphs to represent semantic topology, which is progressively refined via the interactions between local feature aggregation and global cross-domain relational reasoning. Experiments on multiple DG benchmarks validate the effectiveness and robustness of the proposed \mire.
updated: Fri Oct 14 2022 06:52:34 GMT+0000 (UTC)
published: Fri Oct 14 2022 06:52:34 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト