arXiv reaDer
深い階層型ニューラルネットワークに基づく人体のもつれを解く
Disentangled Human Body Embedding Based on Deep Hierarchical Neural Network
 人体は、アイデンティティやポーズが異なるとさまざまな形を示しますが、体の形には構造上の類似点があるため、低次元の空間に埋め込むことができます。このペーパーでは、特に3D人体用に絡み合っていない形状とポーズの埋め込みを学習するためのオートエンコーダのようなネットワークアーキテクチャを紹介します。これは、変形に基づく潜在表現学習の最近の進歩に触発されています。再構成の精度を向上させるために、解きほぐしプロセスの階層的再構成パイプラインを提案し、ニューラルネットワークの学習に一貫した接続性を持つ人体モデルの大規模なデータセットを構築します。私たちの学習した埋め込みは、優れた再構成精度を実現できるだけでなく、補間、バイリニア補間、および潜在空間サンプリングを介して3D人体生成に大きな柔軟性を提供します。広範な実験の結果は、さまざまなアプリケーションに埋め込まれた学習した3D人体の強力さを示しています。
Human bodies exhibit various shapes for different identities or poses, but the body shape has certain similarities in structure and thus can be embedded in a low-dimensional space. This paper presents an autoencoder-like network architecture to learn disentangled shape and pose embedding specifically for the 3D human body. This is inspired by recent progress of deformation-based latent representation learning. To improve the reconstruction accuracy, we propose a hierarchical reconstruction pipeline for the disentangling process and construct a large dataset of human body models with consistent connectivity for the learning of the neural network. Our learned embedding can not only achieve superior reconstruction accuracy but also provide great flexibility in 3D human body generation via interpolation, bilinear interpolation, and latent space sampling. The results from extensive experiments demonstrate the powerfulness of our learned 3D human body embedding in various applications.
updated: Fri Apr 17 2020 10:09:32 GMT+0000 (UTC)
published: Tue May 14 2019 14:06:54 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト