画像汎関数の変分最適化のためのトポロジカル導関数の使用を通じて離散トポロジ変更を可能にする微分可能な表面進化のための理論的枠組みを紹介します。ジオメトリを逆レンダリングするための従来の方法は、トポロジ変更のシルエット勾配に依存していますが、そのような信号はまばらです。対照的に、私たちの理論は、消失する穴と位相の導入を画像強度の変化に関連付けるトポロジカル導関数を導き出します。その結果、ホールまたは位相核生成の形で微分可能な形状摂動が可能になります。 2D の閉曲線と 3D の曲面の最適化を使用して提案された理論を検証し、現在の手法の限界について洞察を与え、画像のベクトル化、テキスト プロンプトからのベクトル グラフィックスの生成、形状アンビグラムの単一画像の再構成、および複数の画像のベクトル化などのアプリケーションの改善を可能にします。 - 3D 再構成を表示します。
We introduce a theoretical framework for differentiable surface evolution that allows discrete topology changes through the use of topological derivatives for variational optimization of image functionals. While prior methods for inverse rendering of geometry rely on silhouette gradients for topology changes, such signals are sparse. In contrast, our theory derives topological derivatives that relate the introduction of vanishing holes and phases to changes in image intensity. As a result, we enable differentiable shape perturbations in the form of hole or phase nucleation. We validate the proposed theory with optimization of closed curves in 2D and surfaces in 3D to lend insights into limitations of current methods and enable improved applications such as image vectorization, vector-graphics generation from text prompts, single-image reconstruction of shape ambigrams and multi-view 3D reconstruction.