顔認識ネットワークは、ID分類のトレーニングを受けながら、機密属性に関する情報をエンコードします。このようなエンコーディングには2つの大きな問題があります。(a)顔の表現がプライバシー漏えいの影響を受けやすくなる(b)顔認識の偏りに寄与するように見える。ただし、既存のバイアス軽減アプローチでは、一般にエンドツーエンドのトレーニングが必要であり、高い検証精度を達成することはできません。したがって、「保護された属性抑制システム(PASS)」と呼ばれる記述子ベースの敵対的バイアス除去アプローチを提示します。 PASSは、以前にトレーニングされた高性能ネットワークから取得した記述子の上でトレーニングして、IDを分類し、同時に機密属性のエンコードを減らすことができます。これにより、エンドツーエンドのトレーニングが不要になります。 PASSのコンポーネントとして、ネットワークが保護された属性情報をエンコードすることを思いとどまらせる新しい弁別器トレーニング戦略を提示します。 ArcfaceのようなSOTA顔認識ネットワークからの記述子の性別と肌色の情報を減らすPASSの有効性を示します。その結果、PASS記述子は、高い検証精度を維持しながら、IJB-Cデータセットの性別とスキントーンのバイアスを減らすという点で既存のベースラインを上回ります。
Face recognition networks encode information about sensitive attributes while being trained for identity classification. Such encoding has two major issues: (a) it makes the face representations susceptible to privacy leakage (b) it appears to contribute to bias in face recognition. However, existing bias mitigation approaches generally require end-to-end training and are unable to achieve high verification accuracy. Therefore, we present a descriptor-based adversarial de-biasing approach called `Protected Attribute Suppression System (PASS)'. PASS can be trained on top of descriptors obtained from any previously trained high-performing network to classify identities and simultaneously reduce encoding of sensitive attributes. This eliminates the need for end-to-end training. As a component of PASS, we present a novel discriminator training strategy that discourages a network from encoding protected attribute information. We show the efficacy of PASS to reduce gender and skintone information in descriptors from SOTA face recognition networks like Arcface. As a result, PASS descriptors outperform existing baselines in reducing gender and skintone bias on the IJB-C dataset, while maintaining a high verification accuracy.