arXiv reaDer
全身人物画像のワンショット様式化
One-Shot Stylization for Full-Body Human Images
人物の様式化の目標は、人物の全身写真を単一のアート キャラクター参照画像で指定されたスタイルに変換することです。以前の作業では、例に基づいた顔や一般的なシーンの様式化に成功しましたが、全身の人間の様式化はより複雑な領域です。この作品は、全身の人間のイメージを様式化するといういくつかのユニークな課題に取り組んでいます。入力写真の「コンテンツ」(衣服、顔、髪、ポーズ)と芸術的参照の「スタイル」を保存するために、ポーズガイド付きヒューマンジェネレーターをワンショットで微調整する方法を提案します。体型の変形はアート キャラクターのスタイルに不可欠な要素であるため、新しいスケルトン変形モジュールを組み込んで入力人物のポーズを再形成し、DiOr ポーズ誘導人物ジェネレーターを修正して、再スケーリングされたポーズが分布から外れてもより堅牢になるようにします。ジェネレーターが最初に訓練された現実的なポーズの。いくつかの人体研究により、私たちのアプローチの有効性が検証されています。
The goal of human stylization is to transfer full-body human photos to a style specified by a single art character reference image. Although previous work has succeeded in example-based stylization of faces and generic scenes, full-body human stylization is a more complex domain. This work addresses several unique challenges of stylizing full-body human images. We propose a method for one-shot fine-tuning of a pose-guided human generator to preserve the "content" (garments, face, hair, pose) of the input photo and the "style" of the artistic reference. Since body shape deformation is an essential component of an art character's style, we incorporate a novel skeleton deformation module to reshape the pose of the input person and modify the DiOr pose-guided person generator to be more robust to the rescaled poses falling outside the distribution of the realistic poses that the generator is originally trained on. Several human studies verify the effectiveness of our approach.
updated: Fri Apr 14 2023 03:57:36 GMT+0000 (UTC)
published: Fri Apr 14 2023 03:57:36 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト