コンピュータービジョン(CV)は驚くべき結果を達成し、いくつかのタスクで人間を上回っています。それでも、適切な注意を払わないと、大きな差別につながる可能性があります。 CVシステムは、供給されるデータに大きく依存しており、そのようなデータ内のバイアスを学習して増幅することができます。したがって、バイアスの理解と発見の両方の問題が最も重要です。しかし、これまでのところ、視覚データセットのバイアスに関する包括的な調査はありません。この目的のために、この作業の目的は次のとおりです。i)視覚データセットに影響を与える可能性のあるバイアスを説明する。 ii)視覚データセットにおけるバイアスの発見と定量化の方法に関する文献をレビューする。 iii)バイアスを意識した視覚データセットを収集するための既存の試みについて話し合う。私たちの研究の重要な結論は、視覚データセットにおけるバイアスの発見と定量化の問題はまだ未解決であり、対処できるバイアスの方法と範囲の両方の点で改善の余地があるということです。さらに、バイアスのないデータセットのようなものはないので、科学者と実践者はデータセットのバイアスを認識し、それらを明示的にする必要があります。この目的のために、視覚的なデータセット収集中にさまざまなタイプのバイアスを見つけるために使用できるチェックリストを提案します。
Computer Vision (CV) has achieved remarkable results, outperforming humans in several tasks. Nonetheless, it may result in major discrimination if not dealt with proper care. CV systems highly depend on the data they are fed with and can learn and amplify biases within such data. Thus, both the problems of understanding and discovering biases are of utmost importance. Yet, to date there is no comprehensive survey on bias in visual datasets. To this end, this work aims to: i) describe the biases that can affect visual datasets; ii) review the literature on methods for bias discovery and quantification in visual datasets; iii) discuss existing attempts to collect bias-aware visual datasets. A key conclusion of our study is that the problem of bias discovery and quantification in visual datasets is still open and there is room for improvement in terms of both methods and the range of biases that can be addressed; moreover, there is no such thing as a bias-free dataset, so scientists and practitioners must become aware of the biases in their datasets and make them explicit. To this end, we propose a checklist that can be used to spot different types of bias during visual dataset collection.