arXiv reaDer
単眼ビデオからの高解像度のテクスチャおよび衣服を着た3D人間の再構成のための時間的一貫性の喪失
Temporal Consistency Loss for High Resolution Textured and Clothed 3DHuman Reconstruction from Monocular Video
単眼ビデオから服を着た人々の時間的に一貫した3D再構成を学習するための新しい方法を提示します。ボリューム、暗黙的、またはパラメトリックな人間の形状モデルを使用した単眼ビデオからの3D人間再構成の最近の方法は、フレームごとの再構成を生成し、ビデオに適用すると時間的に一貫性のない出力と制限されたパフォーマンスを提供します。この論文では、2つの進歩を提案することにより、単眼ビデオから服を着た3D人間シーケンスのテクスチャ再構成のための時間的に一貫した機能を学習するアプローチを紹介します。 2D画像と粗い3Dジオメトリからの暗黙的な3D再構成のためのハイブリッド表現学習。提案された進歩は、単眼ビデオからの3D再構成とテクスチャ予測の両方の時間的一貫性と精度を改善します。人々の画像の包括的な比較パフォーマンス評価は、提案された方法が、再構成の精度、完全性、品質、および時間的一貫性の大幅な改善を達成する、最先端の学習ベースの単一画像3D人間形状推定アプローチを大幅に上回っていることを示しています。
We present a novel method to learn temporally consistent 3D reconstruction of clothed people from a monocular video. Recent methods for 3D human reconstruction from monocular video using volumetric, implicit or parametric human shape models, produce per frame reconstructions giving temporally inconsistent output and limited performance when applied to video. In this paper, we introduce an approach to learn temporally consistent features for textured reconstruction of clothed 3D human sequences from monocular video by proposing two advances: a novel temporal consistency loss function; and hybrid representation learning for implicit 3D reconstruction from 2D images and coarse 3D geometry. The proposed advances improve the temporal consistency and accuracy of both the 3D reconstruction and texture prediction from a monocular video. Comprehensive comparative performance evaluation on images of people demonstrates that the proposed method significantly outperforms the state-of-the-art learning-based single image 3D human shape estimation approaches achieving significant improvement of reconstruction accuracy, completeness, quality and temporal consistency.
updated: Mon Apr 19 2021 13:04:29 GMT+0000 (UTC)
published: Mon Apr 19 2021 13:04:29 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト