arXiv reaDer
手書き生成のためのライターと文字スタイルのもつれの解消
Disentangling Writer and Character Styles for Handwriting Generation
さまざまな手書き文字を合成するように機械をトレーニングすることは、興味深い作業です。最近、様式化されたオンライン漢字を生成するために、RNN ベースの方法が提案されています。ただし、これらの方法は主に、人物の全体的な文体を捉えることに重点を置いており、同じ人物が書いた文字間の微妙な文体の不一致は無視しています。たとえば、人の筆跡は通常、全体的な均一性 (グリフの傾きや縦横比など) を示しますが、文字のより細かい部分 (ストロークの長さや曲率など) には、スタイルのわずかな違いがまだあります。これに照らして、個々の手書きから作家レベルと文字レベルの両方でスタイル表現を解きほぐし、現実的な様式化されたオンライン手書き文字を合成することを提案します。具体的には、参照サンプルのスタイルの共通点を抽出し、各サンプルの詳細なスタイル パターンをそれぞれキャプチャするために、2 つの補完的な対照的な目的を採用する、スタイルを解きほぐしたトランスフォーマー (SDT) を提示します。さまざまな言語スクリプトでの広範な実験により、SDT の有効性が実証されています。特に、経験的な調査結果は、2 つの学習されたスタイル表現が異なる周波数の大きさで情報を提供することを明らかにしており、個別のスタイル抽出の重要性を強調しています。ソース コードは https://github.com/dailenson/SDT で公開されています。
Training machines to synthesize diverse handwritings is an intriguing task. Recently, RNN-based methods have been proposed to generate stylized online Chinese characters. However, these methods mainly focus on capturing a person's overall writing style, neglecting subtle style inconsistencies between characters written by the same person. For example, while a person's handwriting typically exhibits general uniformity (e.g., glyph slant and aspect ratios), there are still small style variations in finer details (e.g., stroke length and curvature) of characters. In light of this, we propose to disentangle the style representations at both writer and character levels from individual handwritings to synthesize realistic stylized online handwritten characters. Specifically, we present the style-disentangled Transformer (SDT), which employs two complementary contrastive objectives to extract the style commonalities of reference samples and capture the detailed style patterns of each sample, respectively. Extensive experiments on various language scripts demonstrate the effectiveness of SDT. Notably, our empirical findings reveal that the two learned style representations provide information at different frequency magnitudes, underscoring the importance of separate style extraction. Our source code is public at: https://github.com/dailenson/SDT.
updated: Fri Mar 31 2023 13:36:44 GMT+0000 (UTC)
published: Sun Mar 26 2023 14:32:02 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト