arXiv reaDer
DG-Font:教師なしフォント生成のための変形可能な生成ネットワーク
DG-Font: Deformable Generative Networks for Unsupervised Font Generation
フォントの生成は、特に多数の文字で構成され、近年多くの注目を集めている一部の書記体系にとって、困難な問題です。ただし、フォント生成の既存の方法は、多くの場合、教師あり学習にあります。それらは多数のペアデータを必要とし、それは労働集約的で収集するのに費用がかかります。さらに、一般的な画像から画像への変換モデルでは、スタイルをテクスチャと色のセットとして定義することが多く、フォントの生成に直接適用することはできません。これらの問題に対処するために、教師なしフォント生成(DGFont)用の新しい変形可能な生成ネットワークを提案します。ディスプレイスメントマップのペアを予測し、予測されたマップを使用して、コンテンツエンコーダーからの低レベルのフィーチャマップに変形可能な畳み込みを適用するフィーチャ変形スキップ接続(FDSC)を紹介します。 FDSCの出力はミキサーに送られ、最終結果が生成されます。ミキサーはFDSCを利用して、完全な構造で高品質の文字を出力します。生成された画像の品質をさらに向上させるために、コンテンツエンコーダーで3つの変形可能な畳み込みレイヤーを使用して、スタイル不変の特徴表現を学習します。実験は、私たちのモデルが最先端の方法よりも高品質の文字を生成することを示しています。ソースコードはhttps://github.com/ecnuycxie/DG-Fontで入手できます。
Font generation is a challenging problem especially for some writing systems that consist of a large number of characters and has attracted a lot of attention in recent years. However, existing methods for font generation are often in supervised learning. They require a large number of paired data, which is labor-intensive and expensive to collect. Besides, common image-to-image translation models often define style as the set of textures and colors, which cannot be directly applied to font generation. To address these problems, we propose novel deformable generative networks for unsupervised font generation (DGFont). We introduce a feature deformation skip connection (FDSC) which predicts pairs of displacement maps and employs the predicted maps to apply deformable convolution to the low-level feature maps from the content encoder. The outputs of FDSC are fed into a mixer to generate the final results. Taking advantage of FDSC, the mixer outputs a high-quality character with a complete structure. To further improve the quality of generated images, we use three deformable convolution layers in the content encoder to learn style-invariant feature representations. Experiments demonstrate that our model generates characters in higher quality than state-of-art methods. The source code is available at https://github.com/ecnuycxie/DG-Font.
updated: Thu Apr 08 2021 14:19:26 GMT+0000 (UTC)
published: Wed Apr 07 2021 11:32:32 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト