手を洗うことは、COVID-19を含む感染症を予防するための最も重要な方法の1つです。残念ながら、医療スタッフは日常業務で世界保健機関(WHO)の手洗いガイドラインに常に従うとは限りません。この目的のために、WHOによって定義されたさまざまな洗浄動作を自動的に認識するためのニューラルネットワークを紹介します。さまざまな洗浄動作を使用して、大規模な(2000以上のビデオ)実世界のラベル付きデータセットの一部でニューラルネットワークをトレーニングします。予備的な結果は、MobileNetV2やXceptionなどの事前にトレーニングされたニューラルネットワークモデルをタスクに使用すると、さまざまな洗浄動作を認識する際に64%を超える精度を達成できることを示しています。また、この作業の一環として作成された上記のオープンアクセスデータセットのコレクションと構造についても説明します。最後に、ニューラルネットワークを使用して、医療専門家向けの自動品質管理とリアルタイムフィードバック用の携帯電話アプリケーションを構築する方法について説明します。
Washing hands is one of the most important ways to prevent infectious diseases, including COVID-19. Unfortunately, medical staff does not always follow the World Health Organization (WHO) hand washing guidelines in their everyday work. To this end, we present neural networks for automatically recognizing the different washing movements defined by the WHO. We train the neural network on a part of a large (2000+ videos) real-world labeled dataset with the different washing movements. The preliminary results show that using pre-trained neural network models such as MobileNetV2 and Xception for the task, it is possible to achieve >64 % accuracy in recognizing the different washing movements. We also describe the collection and the structure of the above open-access dataset created as part of this work. Finally, we describe how the neural network can be used to construct a mobile phone application for automatic quality control and real-time feedback for medical professionals.