近年、StyleGANによる画像操作への関心が高まっており、最近の研究では、いくつかのセマンティック潜在空間を分析して、生成された画像の属性を編集することに大きな成功を収めていますが、これらの潜在空間ではセマンティックおよび空間操作の精度が限られているため、既存の取り組みは、きめ細かいStyleGAN画像操作、つまりローカル属性変換では無効になります。この問題に対処するために、機能マップと変調スタイルの複数のチャネルで構成される属性固有の制御ユニットを発見します。具体的には、個々のコントロールユニットではなく、コントロールユニットの変調スタイルチャネルと機能マップを共同で操作して、意味的および空間的に解きほぐされたコントロールを取得します。さらに、属性固有の制御ユニットを検出するためのシンプルで効果的な方法を提案します。特定のスパース方向ベクトルに沿って変調スタイルを移動し、これらのコントロールユニットを操作するためのフィーチャマップの計算に使用されるフィルター単位のスタイルを置き換えます。提案した方法をさまざまな顔属性操作タスクで評価します。広範な定性的および定量的結果は、提案された方法が最先端の方法に対して有利に機能することを示しています。実像の操作結果は、私たちの方法の有効性をさらに示しています。
Image manipulation with StyleGAN has been an increasing concern in recent years.Recent works have achieved tremendous success in analyzing several semantic latent spaces to edit the attributes of the generated images.However, due to the limited semantic and spatial manipulation precision in these latent spaces, the existing endeavors are defeated in fine-grained StyleGAN image manipulation, i.e., local attribute translation.To address this issue, we discover attribute-specific control units, which consist of multiple channels of feature maps and modulation styles. Specifically, we collaboratively manipulate the modulation style channels and feature maps in control units rather than individual ones to obtain the semantic and spatial disentangled controls. Furthermore, we propose a simple yet effective method to detect the attribute-specific control units. We move the modulation style along a specific sparse direction vector and replace the filter-wise styles used to compute the feature maps to manipulate these control units. We evaluate our proposed method in various face attribute manipulation tasks. Extensive qualitative and quantitative results demonstrate that our proposed method performs favorably against the state-of-the-art methods. The manipulation results of real images further show the effectiveness of our method.