arXiv reaDer
Transform the Set: Memory Attentive Generation of Guided and Unguided Image Collages
 画像セグメントの切り取りと貼り付けは直感的です。ソーステンプレートを選択すると、アーティストは既存のソースマテリアルを柔軟に再結合できます。正式には、このプロセスは入力として画像セットを取り、セット要素のコラージュを出力します。ソーステンプレートのセットからのこのような選択は、固定サイズの入力を必要とする従来の畳み込みニューラルモデルには簡単に適合しません。注目とセット入力機械学習の進歩に触発され、セット構造化表現を使用してソーステンプレートのイメージコラージュを1つのフォワードパスで生成できる新しいアーキテクチャを提示します。この論文には次のような貢献があります。(i)メモリコラージュの画像生成の注意深い生成(MAGIC)と呼ばれる画像生成の新しいフレームワーク。 (ii)機械学習の観点から、Set-Transformerレイヤーとset-poolingを使用してランダムな画像サンプルのセットをブレンドする、新しい非パラメトリックアプローチである、Generative Adversarial Networks(GAN)アーキテクチャを示します。
Cutting and pasting image segments feels intuitive: the choice of source templates gives artists flexibility in recombining existing source material. Formally, this process takes an image set as input and outputs a collage of the set elements. Such selection from sets of source templates does not fit easily in classical convolutional neural models requiring inputs of fixed size. Inspired by advances in attention and set-input machine learning, we present a novel architecture that can generate in one forward pass image collages of source templates using set-structured representations. This paper has the following contributions: (i) a novel framework for image generation called Memory Attentive Generation of Image Collages (MAGIC) which gives artists new ways to create digital collages; (ii) from the machine-learning perspective, we show a novel Generative Adversarial Networks (GAN) architecture that uses Set-Transformer layers and set-pooling to blend sets of random image samples - a hybrid non-parametric approach.
updated: Thu Nov 28 2019 10:57:00 GMT+0000 (UTC)
published: Wed Oct 16 2019 09:28:40 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト