arXiv reaDer
リップシンクと表現機能を備えた高忠実度のオープンな体現アバター
A High-Fidelity Open Embodied Avatar with Lip Syncing and Expression Capabilities
  仮想エージェントとしての具体化されたアバターには多くのアプリケーションがあり、具体化されていないエージェントよりも利点があり、非言語的な社会的および相互作用の手がかりを活用できます。 Unreal Engine上に構築され、シンプルなPythonプログラミングインターフェースを介して制御できるオープンな具体化されたアバターを紹介します。アバターには、唇の同期(音素制御)、頭のジェスチャー、および表情(顔のアクションユニットまたは基本的な感情カテゴリのいずれかを使用)の機能があります。アバターをパペットのように制御する方法、またはパブリックアプリケーションプログラミングインターフェイス(API)を使用して簡単な会話エージェントを作成する方法を示すコードとモデルをリリースします。 GITHUBリンク:https://github.com/danmcduff/AvatarSim
Embodied avatars as virtual agents have many applications and provide benefits over disembodied agents, allowing non-verbal social and interactional cues to be leveraged, in a similar manner to how humans interact with each other. We present an open embodied avatar built upon the Unreal Engine that can be controlled via a simple python programming interface. The avatar has lip syncing (phoneme control), head gesture and facial expression (using either facial action units or cardinal emotion categories) capabilities. We release code and models to illustrate how the avatar can be controlled like a puppet or used to create a simple conversational agent using public application programming interfaces (APIs). GITHUB link: https://github.com/danmcduff/AvatarSim
updated: Tue Oct 15 2019 05:10:21 GMT+0000 (UTC)
published: Thu Sep 19 2019 01:39:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト