arXiv reaDer
CoverTheFace:ディープラーニングと統計的形状分析を使用した顔カバーのモニタリングとデモンストレーション
CoverTheFace: face covering monitoring and demonstrating using deep learning and statistical shape analysis
ワクチンの開発に成功し、広く利用可能であるにもかかわらず、マスクを着用することは、COVID-19パンデミックに対する強力な保護です。しかし、多くの人がそれらを間違って着用しています。この観察は、マスクを着用している人々の状態を監視するための自動化されたアプローチを考案することを私たちに促します。以前の研究とは異なり、私たちの仕事はマスクの検出を超えています。これは、適切なマスク着用に関するパーソナライズされたデモンストレーションの生成に焦点を当てています。これにより、テキストによる説明ではなく、視覚的なデモンストレーションを通じて、人々がマスクをより適切に使用できるようになります。パイプラインは、顔の覆いの検出から始まります。顔が不適切に覆われている画像の場合、マスクオーバーレイモジュールは、統計的形状分析(SSA)と密なランドマークの配置を組み込んで、顔のジオメトリを近似し、対応する顔を覆う例を生成します。我々の結果は、提案されたシステムが顔が適切に覆われた画像を首尾よく識別することを示している。マスクオーバーレイに関するアブレーション研究は、SSAモデルが顔の形、向き、およびスケールの変化に対処するのに役立つことを示唆しています。最終的な顔を覆う例、特にハーフプロファイルの顔画像は、以前の芸術を著しく上回っています。
Wearing a mask is a strong protection against the COVID-19 pandemic, even though the vaccine has been successfully developed and is widely available. However, many people wear them incorrectly. This observation prompts us to devise an automated approach to monitor the condition of people wearing masks. Unlike previous studies, our work goes beyond mask detection; it focuses on generating a personalized demonstration on proper mask-wearing, which helps people use masks better through visual demonstration rather than text explanation. The pipeline starts from the detection of face covering. For images where faces are improperly covered, our mask overlay module incorporates statistical shape analysis (SSA) and dense landmark alignment to approximate the geometry of a face and generates corresponding face-covering examples. Our results show that the proposed system successfully identifies images with faces covered properly. Our ablation study on mask overlay suggests that the SSA model helps to address variations in face shapes, orientations, and scales. The final face-covering examples, especially half profile face images, surpass previous arts by a noticeable margin.
updated: Mon Aug 23 2021 22:11:07 GMT+0000 (UTC)
published: Mon Aug 23 2021 22:11:07 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト