arXiv reaDer
単一の低解像度画像からの超解像度 3D 人間形状
Super-resolution 3D Human Shape from a Single Low-Resolution Image
単一の低解像度入力画像から超解像度の人間の形状を再構築するための新しいフレームワークを提案します。このアプローチは、単一の画像から 3D の人間の形状を再構築する既存のアプローチの限界を克服します。このアプローチでは、高精細な形状を再構築するために、表面法線やパラメトリック モデルなどの補助データと共に高解像度の画像が必要です。提案されたフレームワークは、再構成された形状を高詳細な陰関数で表します。 2D 画像の超解像の目的と同様に、このアプローチは低解像度の形状から高解像度の対応する形状へのマッピングを学習し、低解像度の画像から 3D 形状の詳細を再構築するために適用されます。このアプローチは、同じ 3D サーフェス形状の低解像度表現と高解像度表現の間で失われた情報を推定する新しい損失関数を使用して、エンドツーエンドでトレーニングされます。服を着た人々の単一画像再構成の評価は、私たちの方法が補助データなしで低解像度画像から高詳細な表面再構成を達成することを示しています。広範な実験により、提案されたアプローチが低解像度画像に適用された場合、以前のアプローチで得られたものよりもはるかに高い詳細レベルで超解像度の人間の形状を推定できることが示されています。
We propose a novel framework to reconstruct super-resolution human shape from a single low-resolution input image. The approach overcomes limitations of existing approaches that reconstruct 3D human shape from a single image, which require high-resolution images together with auxiliary data such as surface normal or a parametric model to reconstruct high-detail shape. The proposed framework represents the reconstructed shape with a high-detail implicit function. Analogous to the objective of 2D image super-resolution, the approach learns the mapping from a low-resolution shape to its high-resolution counterpart and it is applied to reconstruct 3D shape detail from low-resolution images. The approach is trained end-to-end employing a novel loss function which estimates the information lost between a low and high-resolution representation of the same 3D surface shape. Evaluation for single image reconstruction of clothed people demonstrates that our method achieves high-detail surface reconstruction from low-resolution images without auxiliary data. Extensive experiments show that the proposed approach can estimate super-resolution human geometries with a significantly higher level of detail than that obtained with previous approaches when applied to low-resolution images.
updated: Tue Aug 23 2022 05:24:39 GMT+0000 (UTC)
published: Tue Aug 23 2022 05:24:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト