arXiv reaDer
FocalDreamer: Focal-fusion アセンブリによるテキスト駆動の 3D 編集
FocalDreamer: Text-driven 3D Editing via Focal-fusion Assembly
テキスト 3D 編集は、スコア蒸留サンプリングの活用において大幅な進歩を遂げていますが、新しいアプローチでは、コンテンツ作成に不可欠な分離可能で正確かつ一貫した結果を提供するにはまだ不十分です。これに応えて、テキスト プロンプトに従って基本形状と編集可能な部分をマージし、必要な領域内できめ細かい編集を行うフレームワークである FocalDreamer を紹介します。具体的には、ジオメトリ ユニオンとデュアル パス レンダリングを備えた FocalDreamer は、独立した 3D パーツを完全なオブジェクトに組み立て、インスタンスの再利用とパーツごとの制御が便利になるように調整します。私たちは、焦点の融合と全体的な外観の調和を促進する、幾何学的焦点損失とスタイルの一貫性の正則化を提案します。さらに、FocalDreamer は、広く使用されているグラフィック エンジンと互換性のある高忠実度のジオメトリと PBR テクスチャを生成します。広範な実験により、定量的評価と定性的評価の両方において FocalDreamer の優れた編集機能が明らかになりました。
While text-3D editing has made significant strides in leveraging score distillation sampling, emerging approaches still fall short in delivering separable, precise and consistent outcomes that are vital to content creation. In response, we introduce FocalDreamer, a framework that merges base shape with editable parts according to text prompts for fine-grained editing within desired regions. Specifically, equipped with geometry union and dual-path rendering, FocalDreamer assembles independent 3D parts into a complete object, tailored for convenient instance reuse and part-wise control. We propose geometric focal loss and style consistency regularization, which encourage focal fusion and congruent overall appearance. Furthermore, FocalDreamer generates high-fidelity geometry and PBR textures which are compatible with widely-used graphics engines. Extensive experiments have highlighted the superior editing capabilities of FocalDreamer in both quantitative and qualitative evaluations.
updated: Mon Aug 21 2023 10:16:52 GMT+0000 (UTC)
published: Mon Aug 21 2023 10:16:52 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト