学習保証は、多くの場合、iidデータの仮定に依存します。これは、実際のタスクを実行するために予測子が展開されると、実際には違反する可能性があります。したがって、ドメイン適応アプローチは、ラベル上の条件付き分布が基礎となるデータ分布から独立していることを期待する共変量シフトなどの他の仮定が満たされる場合、個別のトレインおよびテストデータ分布がサポートされるという点で追加の柔軟性をもたらす有用なフレームワークとして登場しました。さまざまなトレインおよびテストデータソース間で一般化を誘導するためにいくつかのアプローチが導入されました。これらのアプローチは、データ生成分布が予測モデルによって無視されるように、ドメイン不変性の一般的な考え方に依存することがよくあります。この寄稿では、反対方向からアプローチすることにより、データソース全体で一般化する問題に取り組んでいます。予測が入力データに依存することに加えて、基になるデータ生成に関連する情報を使用する条件付きモデリングアプローチを検討します。分布。たとえば、モデルには、変化する環境や新しいデータソースに適応するための明示的なメカニズムがあります。このようなアプローチは、共変量シフトなどの追加の仮定を必要とせず、さらに、ドメインでよく使用されるミニマックス定式化によって引き起こされるトレーニングの不安定性の一般的な原因を回避する、より単純なトレーニングアルゴリズムを生成するため、現在のドメイン適応方法よりも一般的に適用可能であると主張します。不変の方法。
Learning guarantees often rely on assumptions of i.i.d. data, which will likely be violated in practice once predictors are deployed to perform real-world tasks. Domain adaptation approaches thus appeared as a useful framework yielding extra flexibility in that distinct train and test data distributions are supported, provided that other assumptions are satisfied such as covariate shift, which expects the conditional distributions over labels to be independent of the underlying data distribution. Several approaches were introduced in order to induce generalization across varying train and test data sources, and those often rely on the general idea of domain-invariance, in such a way that the data-generating distributions are to be disregarded by the prediction model. In this contribution, we tackle the problem of generalizing across data sources by approaching it from the opposite direction: we consider a conditional modeling approach in which predictions, in addition to being dependent on the input data, use information relative to the underlying data-generating distribution. For instance, the model has an explicit mechanism to adapt to changing environments and/or new data sources. We argue that such an approach is more generally applicable than current domain adaptation methods since it does not require extra assumptions such as covariate shift and further yields simpler training algorithms that avoid a common source of training instabilities caused by minimax formulations, often employed in domain-invariant methods.