arXiv reaDer
ノイズ除去スコアマッチングのための一貫したアニーリングされたサンプリングの調整について
On tuning consistent annealed sampling for denoising score matching
スコアベースの生成モデルは、画像と音声の合成に最先端の品質を提供します。これらのモデルからのサンプリングは、通常、離散化された一連のノイズレベルと事前定義されたスキームを使用して、繰り返し実行されます。このノートでは、最初に、ノイズ除去スコアマッチングでトレーニングされたモデルの3つの一般的なサンプリングスキームの概要を説明します。次に、それらの1つである一貫したアニーリングされたサンプリングに焦点を当て、そのハイパーパラメータ境界を調べます。次に、これらの境界を明示的に考慮し、少数または可変数のステップを使用する場合の調整を容易にする、このようなハイパーパラメーターの可能な定式化を強調します。最後に、他のサンプリングスキームとの定式化のいくつかの関係を強調します。
Score-based generative models provide state-of-the-art quality for image and audio synthesis. Sampling from these models is performed iteratively, typically employing a discretized series of noise levels and a predefined scheme. In this note, we first overview three common sampling schemes for models trained with denoising score matching. Next, we focus on one of them, consistent annealed sampling, and study its hyper-parameter boundaries. We then highlight a possible formulation of such hyper-parameter that explicitly considers those boundaries and facilitates tuning when using few or a variable number of steps. Finally, we highlight some connections of the formulation with other sampling schemes.
updated: Thu Apr 08 2021 12:19:10 GMT+0000 (UTC)
published: Thu Apr 08 2021 12:19:10 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト