arXiv reaDer
TightCap:衣服の締め付けによる3D人間の形のキャプチャ
TightCap: 3D Human Shape Capture with Clothing Tightness
 このペーパーでは、仮想トライオン、バイオメトリクス、身体評価などの多数のアプリケーションを可能にする単一の3Dヒューマンスキャンだけで人間の形状と服装の両方を正確にキャプチャするデータ駆動型スキームであるTightCapを紹介します。人間のポーズと衣服の厳しい変化を打破するために、衣服の締め付けをモデル化することを提案します。つまり、衣服から人間の形状への変位を、グローバルUVテクスチャリングドメインで暗黙的にモデル化します。このため、強化された統計ヒューマンテンプレートと効果的なマルチステージアライメントスキームを使用して、3Dスキャンをハイブリッド2Dジオメトリ画像にマッピングします。この2D表現に基づいて、新しいタイトネス定式化によって衣服のタイトネスを予測するための新しいフレームワークと、さまざまな衣服カテゴリと人間の姿勢で多層人間の形状と衣服をさらに再構築するための効果的な最適化スキームを提案します。さらに、さまざまな衣服のスタイル、ポーズ、対応するグラウンドトゥルースの人間の形状を含む人間のスキャンの新しい衣服のタイトネスデータセット(CTD)を提案し、さらなる研究を刺激します。広範な実験は、高品質の人間の形状と服装の再構成を実現するための当社のTightCapの有効性、および衣服のセグメンテーション、リターゲティング、アニメーションのさらなるアプリケーションを示しています。
In this paper, we present TightCap, a data-driven scheme to capture both the human shape and dressed garments accurately with only a single 3D human scan, which enables numerous applications such as virtual try-on, biometrics and body evaluation. To break the severe variations of the human poses and garments, we propose to model the clothing tightness - the displacements from the garments to the human shape implicitly in the global UV texturing domain. To this end, we utilize an enhanced statistical human template and an effective multi-stage alignment scheme to map the 3D scan into a hybrid 2D geometry image. Based on this 2D representation, we propose a novel framework to predicted clothing tightness via a novel tightness formulation, as well as an effective optimization scheme to further reconstruct multi-layer human shape and garments under various clothing categories and human postures. We further propose a new clothing tightness dataset (CTD) of human scans with a large variety of clothing styles, poses and corresponding ground-truth human shapes to stimulate further research. Extensive experiments demonstrate the effectiveness of our TightCap to achieve high-quality human shape and dressed garments reconstruction, as well as the further applications for clothing segmentation, retargeting and animation.
updated: Wed May 27 2020 09:15:14 GMT+0000 (UTC)
published: Thu Apr 04 2019 15:21:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト