arXiv reaDer
FaceAtlasAR:拡張現実における顔の鍼治療ポイントのアトラス
FaceAtlasAR: Atlas of Facial Acupuncture Points in Augmented Reality
鍼治療は、施術者が体の特定の箇所を刺激する技術です。鍼治療のポイント(または鍼治療のポイント)と呼ばれるこれらのポイントは、身体のいくつかの目印と比較して、皮膚の領域を解剖学的に定義します。従来の鍼治療は、経験豊富な鍼灸師が鍼灸の正確な位置を決めることに依存しています。初心者は通常、視覚的な手がかりがないために難しいと感じます。このプロジェクトでは、拡張現実(AR)コンテキストで顔の尖点をローカライズして視覚化するプロトタイプシステムであるFaceAtlasARを紹介します。このシステムの目的は、1)解剖学的かつ実行可能な方法で顔の耳介と耳介ゾーンのマップを特定し、2)ARのカテゴリ別に要求された耳介をオーバーレイし、3)耳に耳介ゾーンのマップを表示することです。クロスプラットフォームの機械学習フレームワークであるMediapipeを採用して、デスクトップおよびAndroidフォンで実行されるパイプラインを構築します。 「In-the-wild」、AMI耳データセット、独自の注釈付きデータセットなど、さまざまなベンチマークで実験を行います。結果は、顔の尖点で95%、耳介ゾーンマップで99%/ 97%( "In-the-wild" / AMI)のローカリゼーション精度、および高い堅牢性を示しています。このシステムを使用すると、専門家でなくても、ユーザーは自己指圧治療のために指圧器をすばやく配置できます。
Acupuncture is a technique in which practitioners stimulate specific points on the body. These points, called acupuncture points (or acupoints), anatomically define areas on the skin relative to some landmarks on the body. Traditional acupuncture treatment relies on experienced acupuncturists for precise positioning of acupoints. A novice typically finds it difficult because of the lack of visual cues. This project presents FaceAtlasAR, a prototype system that localizes and visualizes facial acupoints in an augmented reality (AR) context. The system aims to 1) localize facial acupoints and auricular zone map in an anatomical yet feasible way, 2) overlay the requested acupoints by category in AR, and 3) show auricular zone map on the ears. We adopt Mediapipe, a cross-platform machine learning framework, to build the pipeline that runs on desktop and Android phones. We perform experiments on different benchmarks, including "In-the-wild", AMI ear datasets, and our own annotated datasets. Results show the localization accuracy of 95% for facial acupoints, 99% / 97% ("In-the-wild" / AMI) for auricular zone map, and high robustness. With this system, users, even not professionals, can position the acupoints quickly for their self-acupressure treatments.
updated: Mon Nov 29 2021 18:00:25 GMT+0000 (UTC)
published: Mon Nov 29 2021 18:00:25 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト