arXiv reaDer
Representation Learning with Statistical Independence to Mitigate Bias
(データセットまたはタスクにおける)バイアスの存在は、近年の極めて重要な議論をほのめかしている機械学習アプリケーションにおける最も重要な課題の1つであることは間違いありません。このような課題は、医学研究における変数間の疑似相関から、性別または顔認識システムにおける人種の偏見にまで及びます。データセットのキュレーション段階ですべてのタイプのバイアスを制御することは面倒であり、時には不可能です。別の方法は、利用可能なデータを使用して、公正な表現学習を組み込んだモデルを構築することです。この論文では、(1)タスクに関する最大の識別力と(2)保護された(バイアス)変数による最小の統計的平均依存性を持つ機能を学習するために、2つの競合する目的を持つ敵対的トレーニングに基づくそのようなモデルを提案します。 )。私たちのアプローチは、バイアスと学習された特徴との間の消失した相関を促進する新しい敵対的損失関数を組み込むことによってそうします。この方法を、合成データ、医用画像(タスクバイアスを含む)、および性別分類用のデータセット(データセットバイアスを含む)に適用します。我々の結果は、我々の方法によって学習された特徴が優れた予測性能をもたらすだけでなく、偏りがないことを示しています。コードはで入手できます。
Presence of bias (in datasets or tasks) is inarguably one of the most critical challenges in machine learning applications that has alluded to pivotal debates in recent years. Such challenges range from spurious associations between variables in medical studies to the bias of race in gender or face recognition systems. Controlling for all types of biases in the dataset curation stage is cumbersome and sometimes impossible. The alternative is to use the available data and build models incorporating fair representation learning. In this paper, we propose such a model based on adversarial training with two competing objectives to learn features that have (1) maximum discriminative power with respect to the task and (2) minimal statistical mean dependence with the protected (bias) variable(s). Our approach does so by incorporating a new adversarial loss function that encourages a vanished correlation between the bias and the learned features. We apply our method to synthetic data, medical images (containing task bias), and a dataset for gender classification (containing dataset bias). Our results show that the learned features by our method not only result in superior prediction performance but also are unbiased. The code is available at
updated: Fri Nov 20 2020 17:57:38 GMT+0000 (UTC)
published: Tue Oct 08 2019 20:33:58 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト