arXiv reaDer
DPAF: フォワード フェーズでの差分プライベート アグリゲーションによる画像合成
DPAF: Image Synthesis via Differentially Private Aggregation in Forward Phase
差別化されたプライベートな合成データは、機密データを公開するための有望な代替手段です。多くの差分プライベート生成モデルが文献で提案されています。残念ながら、それらはすべて、特に高解像度の画像の場合、合成データの有用性が低いことに悩まされています。ここでは、高次元画像合成のための効果的な差分プライベート生成モデルである DPAF を提案します。モデル トレーニング中のバックワード フェーズでガウス ノイズを追加する以前のプライベート確率的勾配降下ベースの方法とは異なり、DPAF はフォワード フェーズで差別的にプライベートな特徴集約を追加し、勾配クリッピングでの情報損失の削減や低コストなどの利点をもたらします。集約の感度。さらに、不適切なバッチサイズは合成データの有用性に悪影響を与えるため、DPAF は、ディスクリミネーターのさまざまな部分を非対称にトレーニングする新しいトレーニング戦略を提案することにより、適切なバッチサイズを設定するという問題にも取り組みます。 DPAF のパフォーマンスを実証するために、複数の画像データセット (最大解像度 128x128 の画像) でさまざまな方法を広範囲に評価します。
Differentially private synthetic data is a promising alternative for sensitive data release. Many differentially private generative models have been proposed in the literature. Unfortunately, they all suffer from the low utility of the synthetic data, particularly for images of high resolutions. Here, we propose DPAF, an effective differentially private generative model for high-dimensional image synthesis. Different from the prior private stochastic gradient descent-based methods that add Gaussian noises in the backward phase during the model training, DPAF adds a differentially private feature aggregation in the forward phase, bringing advantages, including the reduction of information loss in gradient clipping and low sensitivity for the aggregation. Moreover, as an improper batch size has an adverse impact on the utility of synthetic data, DPAF also tackles the problem of setting a proper batch size by proposing a novel training strategy that asymmetrically trains different parts of the discriminator. We extensively evaluate different methods on multiple image datasets (up to images of 128x128 resolution) to demonstrate the performance of DPAF.
updated: Thu Apr 20 2023 16:32:02 GMT+0000 (UTC)
published: Thu Apr 20 2023 16:32:02 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト