arXiv reaDer
The GAN that Warped: Semantic Attribute Editing with Unpaired Data
 ディープニューラルネットワークは最近、特に顔の画像を編集するのに大成功を収めています。ただし、多くの場合、限られた範囲の解像度でしか動作できないことに制限されています。多くの方法は非常に柔軟であるため、顔を編集すると、IDが不必要に失われることがよくあります。この作業では、スムーズワープフィールドを適用して、セマンティックイメージの編集を実行する方法を学習することを提案しています。セマンティック編集にワーピングを使用しようとする以前のアプローチでは、ペアのデータ、つまり、異なるセマンティック属性を持つ同じ被写体の画像が必要でした。対照的に、Generative Adversarial Networksの最近の進歩を利用して、不対データでモデルをトレーニングできます。私たちは、非常に高い解像度(4k画像)での顔編集を、低解像度での深いネットワークの1回のフォワードパスで示します。また、私たちの編集が対象の身元を保持するのにかなり優れていることも示しています。このアプローチの堅牢性は、Cub200鳥類データセットで妥当な画像編集結果を表示することで実証されています。私たちの知る限り、これはデータセットの挑戦的な性質のため、以前は達成されていません。
Deep neural networks have recently been used to edit images with great success, in particular for faces. However, they are often limited to only being able to work at a restricted range of resolutions. Many methods are so flexible that face edits can often result in an unwanted loss of identity. This work proposes to learn how to perform semantic image edits through the application of smooth warp fields. Previous approaches that attempted to use warping for semantic edits required paired data, i.e. example images of the same subject with different semantic attributes. In contrast, we employ recent advances in Generative Adversarial Networks that allow our model to be trained with unpaired data. We demonstrate face editing at very high resolutions (4k images) with a single forward pass of a deep network at a lower resolution. We also show that our edits are substantially better at preserving the subject's identity. The robustness of our approach is demonstrated by showing plausible image editing results on the Cub200 birds dataset. To our knowledge this has not been previously accomplished, due the challenging nature of the dataset.
updated: Thu Mar 05 2020 16:01:39 GMT+0000 (UTC)
published: Fri Nov 30 2018 13:26:38 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト