arXiv reaDer
PBNS: Physically Based Neural Simulator for Unsupervised Garment Pose Space Deformation
ディープラーニングを通じて、リギングされた衣服のポーズ空間変形(PSD)の基礎を自動的に取得する方法論を提示します。古典的なアプローチは、衣服をアニメーション化するために物理ベースのシミュレーション(PBS)に依存しています。これらは、空間と時間の十分にきめ細かい離散化を前提として、非常に現実的な結果を達成できる一般的なソリューションです。ただし、これらは計算コストが高く、シーンを変更すると再シミュレーションが必要になります。 PSDを使用したリニアブレンドスキニング(LBS)は、PBSの軽量な代替手段を提供しますが、適切なPSDを学習するには膨大な量のデータが必要です。暗黙のPBSとして定式化された深層学習を使用して、制約のあるシナリオで現実的な布のポーズ空間変形を監視なしで学習することを提案します。さらに、いくつかのシーケンスのPBSに匹敵する時間でこれらのモデルをトレーニングすることが可能であることを示します。私たちの知る限り、私たちは布の神経シミュレーターを最初に提案しました。ドメイン内のディープベースのアプローチがトレンドになりつつありますが、これらはデータを大量に消費するモデルです。さらに、著者はしばしば、PBSデータからしわをよりよく学ぶために複雑な処方を提案します。教師あり学習は、衝突解決を使用する必要がある物理的に一貫性のない予測につながります。また、PBSデータへの依存は、これらのソリューションのスケーラビリティを制限しますが、それらの定式化は、その適用性と互換性を妨げます。 LBSモデル(3Dアニメーション標準)のPSDを学習するための教師なし方法論を提案することにより、これらの欠点の両方を克服します。得られた結果は、アニメーション化された衣服の布の一貫性と、ポーズに依存する意味のある折り目やしわを示しています。私たちのソリューションは非常に効率的で、複数の布の層を処理し、教師なしの服のサイズ変更を可能にし、カスタム3Dアバターに簡単に適用できます。
We present a methodology to automatically obtain Pose Space Deformation (PSD) basis for rigged garments through deep learning. Classical approaches rely on Physically Based Simulations (PBS) to animate clothes. These are general solutions that, given a sufficiently fine-grained discretization of space and time, can achieve highly realistic results. However, they are computationally expensive and any scene modification prompts the need of re-simulation. Linear Blend Skinning (LBS) with PSD offers a lightweight alternative to PBS, though, it needs huge volumes of data to learn proper PSD. We propose using deep learning, formulated as an implicit PBS, to unsupervisedly learn realistic cloth Pose Space Deformations in a constrained scenario: dressed humans. Furthermore, we show it is possible to train these models in an amount of time comparable to a PBS of a few sequences. To the best of our knowledge, we are the first to propose a neural simulator for cloth. While deep-based approaches in the domain are becoming a trend, these are data-hungry models. Moreover, authors often propose complex formulations to better learn wrinkles from PBS data. Supervised learning leads to physically inconsistent predictions that require collision solving to be used. Also, dependency on PBS data limits the scalability of these solutions, while their formulation hinders its applicability and compatibility. By proposing an unsupervised methodology to learn PSD for LBS models (3D animation standard), we overcome both of these drawbacks. Results obtained show cloth-consistency in the animated garments and meaningful pose-dependant folds and wrinkles. Our solution is extremely efficient, handles multiple layers of cloth, allows unsupervised outfit resizing and can be easily applied to any custom 3D avatar.
updated: Fri May 21 2021 18:41:35 GMT+0000 (UTC)
published: Mon Dec 21 2020 13:22:10 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト