arXiv reaDer
単純なドメイン一般化手法は、オープン ドメイン一般化の強力なベースラインです
Simple Domain Generalization Methods are Strong Baselines for Open Domain Generalization
実際のアプリケーションでは、機械学習モデルは、トレーニング フェーズと推論フェーズでデータの分布が異なるドメイン シフトに加えて、推論中に未知のクラスが現れるオープン セット認識 (OSR) を処理する必要があります。 .ドメインの一般化 (DG) は、モデルのトレーニング中に推論フェーズのターゲット ドメインにアクセスできないドメイン シフトの状況を処理することを目的としています。 Open domain generalization (ODG) では、DG と OSR の両方が考慮されます。 Domain-Augmented Meta-Learning (DAML) は、ODG を対象とした手法ですが、学習プロセスが複雑です。一方、さまざまな DG 手法が提案されていますが、それらは ODG の状況で評価されていません。この作業は、ODG の既存の DG メソッドを包括的に評価し、2 つの単純な DG メソッド、CORrelation ALignment (CORAL) と Maximum Mean Discrepancy (MMD) がいくつかのケースで DAML と競合することを示しています。さらに、アンサンブル学習やディリクレ ミックスアップ データ拡張など、DAML で使用される手法を導入することにより、CORAL と MMD の単純な拡張を提案します。実験的評価は、拡張された CORAL と MMD が、より低い計算コストで DAML と同等に実行できることを示しています。これは、単純な DG メソッドとその単純な拡張が ODG の強力なベースラインであることを示唆しています。実験で使用したコードは、https://github.com/shiralab/OpenDG-Eval で入手できます。
In real-world applications, a machine learning model is required to handle an open-set recognition (OSR), where unknown classes appear during the inference, in addition to a domain shift, where the distribution of data differs between the training and inference phases. Domain generalization (DG) aims to handle the domain shift situation where the target domain of the inference phase is inaccessible during model training. Open domain generalization (ODG) takes into account both DG and OSR. Domain-Augmented Meta-Learning (DAML) is a method targeting ODG but has a complicated learning process. On the other hand, although various DG methods have been proposed, they have not been evaluated in ODG situations. This work comprehensively evaluates existing DG methods in ODG and shows that two simple DG methods, CORrelation ALignment (CORAL) and Maximum Mean Discrepancy (MMD), are competitive with DAML in several cases. In addition, we propose simple extensions of CORAL and MMD by introducing the techniques used in DAML, such as ensemble learning and Dirichlet mixup data augmentation. The experimental evaluation demonstrates that the extended CORAL and MMD can perform comparably to DAML with lower computational costs. This suggests that the simple DG methods and their simple extensions are strong baselines for ODG. The code used in the experiments is available at https://github.com/shiralab/OpenDG-Eval.
updated: Fri Mar 31 2023 13:08:31 GMT+0000 (UTC)
published: Fri Mar 31 2023 13:08:31 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト