arXiv reaDer
Wasserstein Diffusion Tikhonov Regularization
  入力データのクラス内変動にロバストな判別モデルを学習するための正則化戦略を提案します。 Wasserstein-2ジオメトリを使用して、画像の空間で意味的に意味のある近傍をキャプチャし、対応する入力依存の加法性ノイズデータ増大モデルを定義します。増加した損失を拡大して統合すると、効果的なTikhonovタイプのWasserstein拡散平滑化レギュライザーが得られます。このアプローチにより、高レベルの正則化を適用し、クラス内の変動性は低いがクラス間で柔軟性を維持する関数をトレーニングできます。敵のデータ増強を伴うトレーニングと比較して、ごくわずかなコストで正則化を計算する効率的な方法を提供します。最初の実験では、敵対的摂動下での一般化パフォーマンスの改善と、入力データのクラス内の大きな変動も実証されています。
We propose regularization strategies for learning discriminative models that are robust to in-class variations of the input data. We use the Wasserstein-2 geometry to capture semantically meaningful neighborhoods in the space of images, and define a corresponding input-dependent additive noise data augmentation model. Expanding and integrating the augmented loss yields an effective Tikhonov-type Wasserstein diffusion smoothness regularizer. This approach allows us to apply high levels of regularization and train functions that have low variability within classes but remain flexible across classes. We provide efficient methods for computing the regularizer at a negligible cost in comparison to training with adversarial data augmentation. Initial experiments demonstrate improvements in generalization performance under adversarial perturbations and also large in-class variations of the input data.
updated: Sun Sep 15 2019 19:10:16 GMT+0000 (UTC)
published: Sun Sep 15 2019 19:10:16 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト