この作業では、3D メッシュ上に高品質のテクスチャを合成することに重点を置いています。ポイント UV 拡散は、ノイズ除去拡散モデルと UV マッピングを組み合わせて、一貫した 3D の高品質テクスチャ イメージを UV 空間に生成する粗いから細かいまでのパイプラインです。まず、点拡散モデルを導入して、調整されたスタイル ガイダンスを使用して低周波テクスチャ コンポーネントを合成し、偏った色分布に対処します。派生された粗いテクスチャは全体的な一貫性を提供し、後続の UV 拡散ステージの条件として機能し、モデルを正規化して 3D の一貫した UV テクスチャ イメージを生成するのに役立ちます。次に、ハイブリッド条件の UV 拡散モデルが開発され、2D UV 空間でのテクスチャの忠実度が向上します。私たちの方法は、あらゆる属のメッシュを処理し、多様でジオメトリ互換性のある忠実度の高いテクスチャを生成できます。コードは https://cvmi-lab.github.io/Point-UV-Diffusion で入手できます。
In this work, we focus on synthesizing high-quality textures on 3D meshes. We present Point-UV diffusion, a coarse-to-fine pipeline that marries the denoising diffusion model with UV mapping to generate 3D consistent and high-quality texture images in UV space. We start with introducing a point diffusion model to synthesize low-frequency texture components with our tailored style guidance to tackle the biased color distribution. The derived coarse texture offers global consistency and serves as a condition for the subsequent UV diffusion stage, aiding in regularizing the model to generate a 3D consistent UV texture image. Then, a UV diffusion model with hybrid conditions is developed to enhance the texture fidelity in the 2D UV space. Our method can process meshes of any genus, generating diversified, geometry-compatible, and high-fidelity textures. Code is available at https://cvmi-lab.github.io/Point-UV-Diffusion