arXiv reaDer
ProtoRes:学習した逆運動学によるポーズオーサリングのためのプロト残余ネットワーク
ProtoRes: Proto-Residual Network for Pose Authoring via Learned Inverse Kinematics
私たちの仕事は、高度なAI支援アニメーションツールのための人間のポーズの学習可能な神経表現の開発に焦点を当てています。具体的には、スパースで可変のユーザー入力(たとえば、体の関節のサブセットの位置や向き)に基づいて完全に静的な人間のポーズを構築する問題に取り組みます。この問題を解決するために、残余接続と部分的に指定されたポーズのプロトタイプエンコーディングを組み合わせて、学習した潜在空間から新しい完全なポーズを作成する新しいニューラルアーキテクチャを提案します。精度と計算効率の両方の点で、私たちのアーキテクチャがTransformerに基づくベースラインを上回っていることを示します。さらに、リアルタイム3D開発プラットフォームであるUnityにニューラルモデルを統合するためのユーザーインターフェイスを開発しています。さらに、高品質の人間のモーションキャプチャデータに基づいて、静的な人間のポーズモデリングの問題を表す2つの新しいデータセットを紹介します。これらのデータは、モデルコードとともに公開されます。
Our work focuses on the development of a learnable neural representation of human pose for advanced AI assisted animation tooling. Specifically, we tackle the problem of constructing a full static human pose based on sparse and variable user inputs (e.g. locations and/or orientations of a subset of body joints). To solve this problem, we propose a novel neural architecture that combines residual connections with prototype encoding of a partially specified pose to create a new complete pose from the learned latent space. We show that our architecture outperforms a baseline based on Transformer, both in terms of accuracy and computational efficiency. Additionally, we develop a user interface to integrate our neural model in Unity, a real-time 3D development platform. Furthermore, we introduce two new datasets representing the static human pose modeling problem, based on high-quality human motion capture data, which will be released publicly along with model code.
updated: Sat Jan 29 2022 00:56:48 GMT+0000 (UTC)
published: Thu Jun 03 2021 16:56:58 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト