COVID-19のパンデミックは、世界中の日常生活のあらゆる分野に影響を及ぼします。コロナウイルスの蔓延を防ぎ、世界中の日常生活を回復するために、保健機関は社会的距離を置き、フェイスマスクを着用し、顔に触れないようにすることを勧めています。これらの推奨される保護対策に基づいて、COVID-19の感染を防ぐのに役立つディープラーニングベースのコンピュータービジョンシステムを開発しました。具体的には、開発したシステムは、フェイスマスク検出、顔と手の相互作用の検出を実行し、社会的距離を測定します。これらの目的のために、現実の世界でのフェイスマスクの使用法と顔と手の相互作用を表す画像を収集して注釈を付けました。 2つの異なる顔データセット、つまり、制約なしフェイスマスクデータセット(UFMD)と制約なし顔手データセット(UFHD)を提示しました。提案されたモデルを独自のデータセットでトレーニングし、これらのターゲットデータセットに適応を実行せずに、データセットと文献にある既存のデータセットの両方で評価しました。また、人と人との社会的距離を追跡する距離測定モジュールを提案しました。実験結果は、UFMDとUFHDが実世界の多様性をよく表していることを示しています。提案されたシステムは、顔マスクの使用法と顔と手の相互作用を検出するためのトレーニングデータの外部からの見えないデータの実際のシナリオで非常に高いパフォーマンスと一般化能力を達成し、社会的距離を追跡する場合は満足のいくパフォーマンスを達成しました。提示されたUFMDおよびUFHDデータセットは、https://github.com/iremeyiokur/COVID-19-Preventions-Control-Systemで入手できます。
The COVID-19 pandemic affects every area of daily life globally. To avoid the spread of coronavirus and retrieve the daily normal worldwide, health organizations advise social distancing, wearing face mask, and avoiding touching face. Based on these recommended protective measures, we developed a deep learning-based computer vision system to help prevent the transmission of COVID-19. Specifically, the developed system performs face mask detection, face-hand interaction detection, and measures social distance. For these purposes, we collected and annotated images that represent face mask usage and face-hand interaction in the real world. We presented two different face datasets, namely Unconstrained Face Mask Dataset (UFMD) and Unconstrained Face Hand Dataset (UFHD). We trained the proposed models on our own datasets and evaluated them on both our datasets and already existing datasets in the literature without performing any adaptation on these target datasets. Besides, we proposed a distance measurement module to track social distance between people. Experimental results indicate that UFMD and UFHD represent the real-world's diversity well. The proposed system achieved very high performance and generalization capacity in a real-world scenario for unseen data from outside the training data to detect face mask usage and face-hand interaction, and satisfactory performance in the case of tracking social distance. Presented UFMD and UFHD datasets will be available at https://github.com/iremeyiokur/COVID-19-Preventions-Control-System.