arXiv reaDer
TightCap:衣服のタイトネスフィールドを使用した3Dヒューマンシェイプキャプチャ
TightCap: 3D Human Shape Capture with Clothing Tightness Field
この論文では、1回の3Dヒューマンスキャンだけで人間の形と服を着た衣服の両方を正確にキャプチャするデータ駆動型スキームであるTightCapを紹介します。これにより、仮想試着、生体認証、身体評価などのさまざまなアプリケーションが可能になります。人間のポーズと衣服の深刻な変化を打破するために、衣服のタイトさをモデル化することを提案します。これは、グローバルUVテクスチャドメインで暗黙的に衣服から人間の形状への変位です。この目的のために、強化された統計的ヒューマンテンプレートと効果的な多段階アライメントスキームを利用して、3Dスキャンをハイブリッド2Dジオメトリ画像にマッピングします。この2D表現に基づいて、新しいタイトネスの定式化によって衣服のタイトネスを予測する新しいフレームワークと、さまざまな衣服カテゴリと人間の姿勢の下で多層の人間の形状と衣服をさらに再構築するための効果的な最適化スキームを提案します。さらに、さまざまな衣服のスタイル、ポーズ、および対応するグラウンドトゥルースの人間の形状を使用した人間のスキャンの新しい衣服の気密性データセット(CTD)を提案し、さらなる研究を刺激します。広範な実験により、高品質の人間の形と服を着た衣服の再構築、および衣服のセグメンテーション、リターゲティング、アニメーションのさらなるアプリケーションを実現するためのTightCapの有効性が実証されています。
In this paper, we present TightCap, a data-driven scheme to capture both the human shape and dressed garments accurately with only a single 3D human scan, which enables numerous applications such as virtual try-on, biometrics and body evaluation. To break the severe variations of the human poses and garments, we propose to model the clothing tightness - the displacements from the garments to the human shape implicitly in the global UV texturing domain. To this end, we utilize an enhanced statistical human template and an effective multi-stage alignment scheme to map the 3D scan into a hybrid 2D geometry image. Based on this 2D representation, we propose a novel framework to predicted clothing tightness via a novel tightness formulation, as well as an effective optimization scheme to further reconstruct multi-layer human shape and garments under various clothing categories and human postures. We further propose a new clothing tightness dataset (CTD) of human scans with a large variety of clothing styles, poses and corresponding ground-truth human shapes to stimulate further research. Extensive experiments demonstrate the effectiveness of our TightCap to achieve high-quality human shape and dressed garments reconstruction, as well as the further applications for clothing segmentation, retargeting and animation.
updated: Fri Aug 06 2021 07:38:11 GMT+0000 (UTC)
published: Thu Apr 04 2019 15:21:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト