鍼灸は、施術者が体の特定の箇所を刺激する技術です。経穴(またはツボ)と呼ばれるこれらの点は、体の特定の目印に関連する皮膚の領域を解剖学的に定義します。ただし、経験の浅いはり師にとって、ツボを個人にマッピングすることは困難な場合があります。このプロジェクトでは、拡張現実(AR)コンテキストで個人の顔のツボをローカライズして視覚化するシステムを提案しました。このシステムは、顔の位置合わせモデルと髪のセグメンテーションモデルを組み合わせて、リアルタイム(60FPS)でのツボの位置特定のための高密度の参照ポイントを提供します。ローカリゼーションプロセスでは、専門家によって一般的に操作される比例骨(B-cunまたは骨格)測定方法が採用されます。ただし、実際には、スキル関連のエラーが原因で、オペレーターが不正確に感じることがあります。このシステムを使用すると、ユーザーは、スキルがなくても、自己トレーニングまたは自己治療プロセスの一環として顔のツボを見つけることができます。
Acupuncture is a technique in which practitioners stimulate specific points on the body. Those points, called acupuncture points (or acupoints), anatomically define areas on the skin relative to specific landmarks on the body. However, mapping the acupoints to individuals could be challenging for inexperienced acupuncturists. In this project, we proposed a system to localize and visualize facial acupoints for individuals in an augmented reality (AR) context. This system combines a face alignment model and a hair segmentation model to provide dense reference points for acupoints localization in real-time (60FPS). The localization process takes the proportional bone (B-cun or skeletal) measurement method, which is commonly operated by specialists; however, in the real practice, operators sometimes find it inaccurate due to skill-related error. With this system, users, even without any skills, can locate the facial acupoints as a part of the self-training or self-treatment process.