arXiv reaDer
顔の表情認識における公平性に対するモデル圧縮の効果
The Effect of Model Compression on Fairness in Facial Expression Recognition
ディープニューラルネットワークは非常に成功しており、さまざまなタスクで人間のようなパフォーマンスを実現しています。ただし、それらは計算コストも高く、深層学習モデルに関連するリソース消費を削減するモデル圧縮技術の開発の動機となっています。それにもかかわらず、最近の研究では、モデルの圧縮がアルゴリズムの公平性に悪影響を及ぼし、機械学習モデルの既存のバイアスを増幅する可能性があることが示唆されています。このプロジェクトでは、これらの研究を顔の表情認識のコンテキストに拡張することを目指しています。そのために、顔の表情の認識を実行するニューラルネットワーク分類器を設定し、その上にいくつかのモデル圧縮技術を実装します。次に、2つの顔の表情データセット、つまり拡張コーンカナデデータセット(CK + DB)と実世界の感情的な顔データベース(RAF-DB)で実験を実行し、圧縮技術がモデルに与える個々の効果と組み合わせた効果を調べます。サイズ、正確性、公平性。私たちの実験結果は次のことを示しています。(i)圧縮と量子化により、CK + DBとRAF-DBの両方の全体的な精度への影響を最小限に抑えながら、モデルサイズを大幅に削減できます。 (ii)モデルの精度の観点から、RAF-DBでトレーニングおよびテストされた分類器は、CK + DBと比較して圧縮に対してより堅牢であるように見えます。 (iii)RAF-DBの場合、圧縮が増幅するように見えるCK + DBの結果とは対照的に、異なる圧縮戦略は、性別、人種、年齢の敏感な属性全体で予測パフォーマンスのギャップを拡大しないようです。ジェンダーに対する既存のバイアス。結果を分析し、調査結果の潜在的な理由について説明します。
Deep neural networks have proved hugely successful, achieving human-like performance on a variety of tasks. However, they are also computationally expensive, which has motivated the development of model compression techniques which reduce the resource consumption associated with deep learning models. Nevertheless, recent studies have suggested that model compression can have an adverse effect on algorithmic fairness, amplifying existing biases in machine learning models. With this project we aim to extend those studies to the context of facial expression recognition. To do that, we set up a neural network classifier to perform facial expression recognition and implement several model compression techniques on top of it. We then run experiments on two facial expression datasets, namely the Extended Cohn-Kanade Dataset (CK+DB) and the Real-World Affective Faces Database (RAF-DB), to examine the individual and combined effect that compression techniques have on the model size, accuracy and fairness. Our experimental results show that: (i) Compression and quantisation achieve significant reduction in model size with minimal impact on overall accuracy for both CK+DB and RAF-DB; (ii) in terms of model accuracy, the classifier trained and tested on RAF-DB seems more robust to compression compared to the CK+ DB; (iii) for RAF-DB, the different compression strategies do not seem to increase the gap in predictive performance across the sensitive attributes of gender, race and age which is in contrast with the results on the CK+DB, where compression seems to amplify existing biases for gender. We analyse the results and discuss the potential reasons for our findings.
updated: Wed Jan 05 2022 16:59:15 GMT+0000 (UTC)
published: Wed Jan 05 2022 16:59:15 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト