arXiv reaDer
2つの新しいマスクされた顔認識データセットに適用されたマスクされた顔を生成するための現実的なアプローチ
A realistic approach to generate masked faces applied on two novel masked face recognition data sets
COVID-19のパンデミックは、顔認識システムを新しい現実に適応させるという問題を引き起こします。そこでは、人々は鼻と口を覆うためにサージカルマスクを着用する可能性があります。これらのシステムのトレーニングに使用される従来のデータセット(CelebA、CASIA-WebFaceなど)は、パンデミックの前にリリースされたため、マスクを着用している人の例が不足しているため、現在は不適切と思われます。合成マスクを作成し、元の画像の顔にオーバーレイすることにより、マスクのない顔を含むデータセットを拡張する方法を提案します。私たちの方法は、Instagramの顔フィルターを作成するために使用されるFacebook製の開発者プログラムであるSparkARStudioに依存しています。私たちのアプローチでは、さまざまな色、形、生地の9つのマスクを使用します。この方法を使用して、CASIA-WebFaceデータセット用のマスクの445,446(90%)サンプルと、CelebAデータセット用の196,254(96.8%)マスクのサンプルを生成し、https://github.com/でマスク画像をリリースします。 securifai / masked_faces。私たちの方法は、同じタスク用に設計された他の方法やデータセットと定性的に比較するようにボランティアに依頼することにより、顔に重ねられたマスクの非常に現実的なトレーニング例を生成することを示します。また、強化されたデータセットでトレーニングされた最先端の顔認識システム(FaceNet、VGG-face、ArcFace)を評価し、元のデータセット(顔を含む)でトレーニングされた同等のシステムよりも優れていることを示すことで、この方法の有用性を示します。テストベンチマークにマスクされた顔が含まれている場合、マスクなし)または競合するデータセット(関連するメソッドによって生成されたマスクを含む)。
The COVID-19 pandemic raises the problem of adapting face recognition systems to the new reality, where people may wear surgical masks to cover their noses and mouths. Traditional data sets (e.g., CelebA, CASIA-WebFace) used for training these systems were released before the pandemic, so they now seem unsuited due to the lack of examples of people wearing masks. We propose a method for enhancing data sets containing faces without masks by creating synthetic masks and overlaying them on faces in the original images. Our method relies on SparkAR Studio, a developer program made by Facebook that is used to create Instagram face filters. In our approach, we use 9 masks of different colors, shapes and fabrics. We employ our method to generate a number of 445,446 (90%) samples of masks for the CASIA-WebFace data set and 196,254 (96.8%) masks for the CelebA data set, releasing the mask images at https://github.com/securifai/masked_faces. We show that our method produces significantly more realistic training examples of masks overlaid on faces by asking volunteers to qualitatively compare it to other methods or data sets designed for the same task. We also demonstrate the usefulness of our method by evaluating state-of-the-art face recognition systems (FaceNet, VGG-face, ArcFace) trained on our enhanced data sets and showing that they outperform equivalent systems trained on original data sets (containing faces without masks) or competing data sets (containing masks generated by related methods), when the test benchmarks contain masked faces.
updated: Tue Oct 19 2021 16:02:28 GMT+0000 (UTC)
published: Fri Sep 03 2021 22:33:55 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト