arXiv reaDer
Flow Models for Arbitrary Conditional Likelihoods
データセットの機能間の依存関係を理解することは、ほとんどの教師なし学習タスクの中核です。ただし、生成モデリングアプローチの大部分は、共同分布p(x)にのみ焦点を当てており、観測された共変量x_oの残りの部分を考慮して、特徴x_uの任意のサブセットの条件付き分布を取得することが困難なモデルを利用します:p(x_u \ mid x_o)。従来の条件付きアプローチは、観測された共変量の別の固定セットで条件付けられた共変量の固定セットのモデルを提供します。代わりに、この作業では、扱いやすい条件付き尤度を介して(任意のx_uに対して)すべての条件付き分布p(x_u \ mid x_o)を生成できるモデルを開発します。以前は実行不可能であった、観測された共変量の任意のサブセットで条件付けできる(変数ベースの)フロー生成モデル、任意の条件付けフローモデル(AC-Flow)の新しい拡張を提案します。機能の補完にAC-Flowを適用し、フローモデルに原則的な単一の「最良の推測」を提供する補助目的を導入することにより、複数の補完と単一の補完の両方に対応する統合プラットフォームを開発します。広範な経験的評価は、私たちのモデルが、合成および実世界のデータセットの画像修復および機能補完において、単一および複数の補完の両方で最先端のパフォーマンスを達成することを示しています。コードはで入手できます。
Understanding the dependencies among features of a dataset is at the core of most unsupervised learning tasks. However, a majority of generative modeling approaches are focused solely on the joint distribution p(x) and utilize models where it is intractable to obtain the conditional distribution of some arbitrary subset of features x_u given the rest of the observed covariates x_o: p(x_u \mid x_o). Traditional conditional approaches provide a model for a fixed set of covariates conditioned on another fixed set of observed covariates. Instead, in this work we develop a model that is capable of yielding all conditional distributions p(x_u \mid x_o) (for arbitrary x_u) via tractable conditional likelihoods. We propose a novel extension of (change of variables based) flow generative models, arbitrary conditioning flow models (AC-Flow), that can be conditioned on arbitrary subsets of observed covariates, which was previously infeasible. We apply AC-Flow to the imputation of features, and also develop a unified platform for both multiple and single imputation by introducing an auxiliary objective that provides a principled single "best guess" for flow models. Extensive empirical evaluations show that our models achieve state-of-the-art performance in both single and multiple imputation across image inpainting and feature imputation in synthetic and real-world datasets. Code is available at
updated: Thu Aug 06 2020 13:30:33 GMT+0000 (UTC)
published: Fri Sep 13 2019 16:35:17 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト