arXiv reaDer
モバイルGPU上の単眼ビデオからのリアルタイム顔面幾何
Real-time Facial Surface Geometry from Monocular Video on Mobile GPUs
本研究では、ARアプリケーションのために、単一のカメラ入力から人間の顔の近似3Dメッシュ表現を推論するための、エンドツーエンドのニューラルネットワークベースのモデルを提示する。468頂点の比較的密なメッシュモデルは、顔ベースのAR効果に適している。提案したモデルは、モバイルGPU上での超リアルタイム推論速度(デバイスとモデルの種類によっては100-1000 FPS以上)と、同じ画像の手動アノテーションの分散に匹敵する高い予測品質を示している。
We present an end-to-end neural network-based model for inferring an approximate 3D mesh representation of a human face from single camera input for AR applications. The relatively dense mesh model of 468 vertices is well-suited for face-based AR effects. The proposed model demonstrates super-realtime inference speed on mobile GPUs (100-1000+ FPS, depending on the device and model variant) and a high prediction quality that is comparable to the variance in manual annotations of the same image.
updated: Mon Jul 15 2019 20:08:17 GMT+0000 (UTC)
published: Mon Jul 15 2019 20:08:17 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト