arXiv reaDer
挑戦的なゲームアートデータセットを介した制御されたGANベースのクリーチャー合成-ノイズと潜在的なトレードオフへの対処
Controlled GAN-Based Creature Synthesis via a Challenging Game Art Dataset -- Addressing the Noise-Latent Trade-Off
最先端のStyleGAN2ネットワークは、ランダムな画像の生成、クエリに「似た」画像の検索、コンテンツやスタイルの変更など、アートを作成および編集するための強力な方法をサポートしています。さらに、最近の進歩により、小さなデータセットでのトレーニングが可能になりました。これらの方法を適用して、新しいYu-Gi-Ohデータセットのトレーニングを行い、カードアートを合成します。 StyleGAN2へのノイズ入力は良好な合成に不可欠ですが、どちらも長期の画像効果を制御するため、粗いスケールのノイズがこのデータセットの潜在変数に干渉することがわかります。潜在変数の編集によるノイズの変化と弱いコンテンツ制御を伴う、アートの過度に攻撃的な変化を観察します。ここでは、粗いスケールのノイズが抑制されている修正されたStyleGAN2をトレーニングすると、これらの不要な効果が除去されることを示します。優れたFIDを取得します。ノイズの変化は、スタイルのローカルな探求をもたらします。アイデンティティ制御が大幅に改善されました。これらの結果と分析は、すべてのスキルレベルのデジタルアーティスト向けのGAN支援アート合成ツールにつながります。このツールは、映画、ゲーム、または芸術的アイデアのためのクリエイティブ産業で使用できます。
The state-of-the-art StyleGAN2 network supports powerful methods to create and edit art, including generating random images, finding images "like" some query, and modifying content or style. Further, recent advancements enable training with small datasets. We apply these methods to synthesize card art, by training on a novel Yu-Gi-Oh dataset. While noise inputs to StyleGAN2 are essential for good synthesis, we find that coarse-scale noise interferes with latent variables on this dataset because both control long-scale image effects. We observe over-aggressive variation in art with changes in noise and weak content control via latent variable edits. Here, we demonstrate that training a modified StyleGAN2, where coarse-scale noise is suppressed, removes these unwanted effects. We obtain a superior FID; changes in noise result in local exploration of style; and identity control is markedly improved. These results and analysis lead towards a GAN-assisted art synthesis tool for digital artists of all skill levels, which can be used in film, games, or any creative industry for artistic ideation.
updated: Wed Oct 20 2021 20:16:25 GMT+0000 (UTC)
published: Thu Aug 19 2021 21:31:20 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト