arXiv reaDer
MyStyle++: 制御可能なパーソナライズされた生成事前確率
MyStyle++: A Controllable Personalized Generative Prior
この論文では、一連の属性を明示的に制御してパーソナライズされた事前生成を取得するアプローチを提案します。私たちは、個人のいくつかの画像に対して事前にトレーニングされた StyleGAN 顔ジェネレーターの重みを調整する、最近導入されたメソッドである MyStyle に基づいて構築しています。このシステムにより、対象人物の顔の特徴を忠実に合成、編集、補正することができます。ただし、MyStyle は、生成された画像の属性を正確に制御することはできません。私たちは、ジェネレーターの調整に加えて潜在空間を組織化する新しい最適化システムを通じて、この問題に対処することを提案します。私たちの主な貢献は、入力画像に対応する潜在コードを、その属性に応じた一連の特定の方向に沿って配置する損失を定式化することです。私たちは、MyStyle++ と名付けられた私たちのアプローチが、その個人のユニークな顔の特徴を維持しながら、属性を高度に制御してその個人の画像を合成、編集、強化できることを実証します。
In this paper, we propose an approach to obtain a personalized generative prior with explicit control over a set of attributes. We build upon MyStyle, a recently introduced method, that tunes the weights of a pre-trained StyleGAN face generator on a few images of an individual. This system allows synthesizing, editing, and enhancing images of the target individual with high fidelity to their facial features. However, MyStyle does not demonstrate precise control over the attributes of the generated images. We propose to address this problem through a novel optimization system that organizes the latent space in addition to tuning the generator. Our key contribution is to formulate a loss that arranges the latent codes, corresponding to the input images, along a set of specific directions according to their attributes. We demonstrate that our approach, dubbed MyStyle++, is able to synthesize, edit, and enhance images of an individual with great control over the attributes, while preserving the unique facial characteristics of that individual.
updated: Thu Jun 08 2023 01:35:43 GMT+0000 (UTC)
published: Thu Jun 08 2023 01:35:43 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト