arXiv reaDer
JoJoGAN:ワンショットフェイススタイライズ
JoJoGAN: One Shot Face Stylization
スタイルマッパーは、入力画像に固定スタイルを適用します(たとえば、漫画に顔を向けるなど)。このペーパーでは、スタイルの1つの例からスタイルマッパーを学習するための簡単な手順(JoJoGAN)について説明します。 JoJoGANは、GAN反転手順とStyleGANのスタイル混合プロパティを使用して、単一のサンプルスタイルから実質的なペアのデータセットを生成します。次に、ペアになったデータセットを使用して、StyleGANを微調整します。次に、GAN反転と、それに続く微調整されたStyleGANによって、画像をスタイルマッピングできます。 JoJoGANに必要なのは、参照が1つだけで、トレーニング時間はわずか30秒です。 JoJoGANは、極端なスタイル参照(たとえば、動物の顔)を正常に使用できます。さらに、スタイルのどの側面を使用し、どの程度のスタイルを適用するかを制御できます。定性的および定量的評価は、JoJoGANが現在の最先端技術を大幅に上回る高品質の高解像度画像を生成することを示しています。
A style mapper applies some fixed style to its input images (so, for example, taking faces to cartoons). This paper describes a simple procedure -- JoJoGAN -- to learn a style mapper from a single example of the style. JoJoGAN uses a GAN inversion procedure and StyleGAN's style-mixing property to produce a substantial paired dataset from a single example style. The paired dataset is then used to fine-tune a StyleGAN. An image can then be style mapped by GAN-inversion followed by the fine-tuned StyleGAN. JoJoGAN needs just one reference and as little as 30 seconds of training time. JoJoGAN can use extreme style references (say, animal faces) successfully. Furthermore, one can control what aspects of the style are used and how much of the style is applied. Qualitative and quantitative evaluation show that JoJoGAN produces high quality high resolution images that vastly outperform the current state-of-the-art.
updated: Sun Feb 27 2022 19:13:35 GMT+0000 (UTC)
published: Wed Dec 22 2021 03:13:16 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト