スコアベースの拡散モデルは、深い生成モデリングのための最も有望なフレームワークの1つとして浮上しています。この作業では、スコアベースの拡散モデルを使用して条件付き確率分布を学習するためのさまざまなアプローチの体系的な比較と理論的分析を行います。特に、条件付きスコアの最も成功した推定量の1つに理論的な正当化を提供する結果を証明します。さらに、マルチスピード拡散フレームワークを導入します。これにより、条件付きスコアの新しい推定量が得られ、以前の最先端のアプローチと同等のパフォーマンスが得られます。私たちの理論的および実験的発見には、マルチスピード拡散モデルの適用とさらなる研究を可能にするオープンソースライブラリMSDiffが付属しています。
Score-based diffusion models have emerged as one of the most promising frameworks for deep generative modelling. In this work we conduct a systematic comparison and theoretical analysis of different approaches to learning conditional probability distributions with score-based diffusion models. In particular, we prove results which provide a theoretical justification for one of the most successful estimators of the conditional score. Moreover, we introduce a multi-speed diffusion framework, which leads to a new estimator for the conditional score, performing on par with previous state-of-the-art approaches. Our theoretical and experimental findings are accompanied by an open source library MSDiff which allows for application and further research of multi-speed diffusion models.