arXiv reaDer
Cali-Sketch: 人間のようなスケッチから高品質の顔画像を生成するためのストロークのキャリブレーションと完成
Cali-Sketch: Stroke Calibration and Completion for High-Quality Face Image Generation from Human-Like Sketches
画像生成は、セキュリティとエンターテイメントに広く応用されているため、ますます注目を集めています。スケッチベースの顔生成は、監視された相互作用により、画像生成の楽しさと品質の向上をもたらします。ただし、実際の顔との位置合わせが不十分なスケッチが入力として与えられた場合、既存の教師付き画像から画像への変換方法では、許容できる写真のようにリアルな顔画像を生成できないことがよくあります。この問題に対処するために、この論文では、人間のようなスケッチからフォトリアリスティックなイメージへの生成方法である Cali-Sketch を提案します。 Cali-Sketch は、2 つの構成ネットワークを使用してストローク キャリブレーションと画像生成を明示的にモデル化します。ストローク キャリブレーション ネットワーク (SCN) は、顔の特徴のストロークをキャリブレーションし、元の意図の特徴を維持しながら顔の詳細を豊かにします。画像合成ネットワーク (ISN) は、キャリブレーションおよび強化されたスケッチを写真のようにリアルな顔画像に変換します。このようにして、困難なクロスドメイン翻訳の問題を 2 つの簡単なステップに切り離すことができます。広範な実験により、Cali-Sketch によって生成された顔写真は、最先端の方法と比較して、写真のようにリアルであり、入力スケッチに忠実であることが確認されています。
Image generation has received increasing attention because of its wide application in security and entertainment. Sketch-based face generation brings more fun and better quality of image generation due to supervised interaction. However, when a sketch poorly aligned with the true face is given as input, existing supervised image-to-image translation methods often cannot generate acceptable photo-realistic face images. To address this problem, in this paper we propose Cali-Sketch, a human-like-sketch to photo-realistic-image generation method. Cali-Sketch explicitly models stroke calibration and image generation using two constituent networks: a Stroke Calibration Network (SCN), which calibrates strokes of facial features and enriches facial details while preserving the original intent features; and an Image Synthesis Network (ISN), which translates the calibrated and enriched sketches to photo-realistic face images. In this way, we manage to decouple a difficult cross-domain translation problem into two easier steps. Extensive experiments verify that the face photos generated by Cali-Sketch are both photo-realistic and faithful to the input sketches, compared with state-of-the-art methods.
updated: Sun Oct 09 2022 16:58:35 GMT+0000 (UTC)
published: Fri Nov 01 2019 15:32:42 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト