レイアウトからの条件付き画像合成は、最近多くの関心を集めています。以前のアプローチでは、オブジェクトの場所とクラスラベルでジェネレーターを条件付けていますが、個々のオブジェクトのさまざまな外観の側面をきめ細かく制御することはできません。画像生成プロセスを制御することは、ユーザーフレンドリーなインターフェイスを備えた実用的なアプリケーションを構築するための基本です。本論文では、画像の他の部分に影響を与えることなく個々のオブジェクトの外観を指定することを可能にする、レイアウトからの属性制御画像合成の方法を提案します。レイアウトから画像への生成のための最先端のアプローチを拡張して、属性の個々のオブジェクトをさらに条件付けます。合成および挑戦的なビジュアルゲノムデータセットを作成して実験します。私たちの定性的および定量的結果は、複数のオブジェクトを含む複雑なシーンをモデル化するときに、私たちの方法が個々のオブジェクトの詳細をうまく制御できることを示しています。
Conditional image synthesis from layout has recently attracted much interest. Previous approaches condition the generator on object locations as well as class labels but lack fine-grained control over the diverse appearance aspects of individual objects. Gaining control over the image generation process is fundamental to build practical applications with a user-friendly interface. In this paper, we propose a method for attribute controlled image synthesis from layout which allows to specify the appearance of individual objects without affecting the rest of the image. We extend a state-of-the-art approach for layout-to-image generation to additionally condition individual objects on attributes. We create and experiment on a synthetic, as well as the challenging Visual Genome dataset. Our qualitative and quantitative results show that our method can successfully control the fine-grained details of individual objects when modelling complex scenes with multiple objects.