単一の画像で生成モデルをトレーニングすることは、近年大きな注目を集めています。単一画像生成手法は、単一の自然画像の内部パッチ分布を複数のスケールで学習するように設計されています。これらのモデルは、トレーニング画像に意味的に似ているさまざまなサンプルを描画するために使用できるだけでなく、その特定の画像に関連する多くの画像編集および復元タスクを解決するためにも使用できます。ここでは、空間的に変化する画像同一性条件付けを備えた単一のモデルを使用して、複数の画像の内部分布を同時に学習できる拡張フレームワークを紹介します。当社の BlendGAN は、モーフィング、融合、2 つ以上の任意の画像間の構造とテクスチャの融合など、単一画像モデルではサポートされていないアプリケーションへの扉を開きます。
Training a generative model on a single image has drawn significant attention in recent years. Single image generative methods are designed to learn the internal patch distribution of a single natural image at multiple scales. These models can be used for drawing diverse samples that semantically resemble the training image, as well as for solving many image editing and restoration tasks that involve that particular image. Here, we introduce an extended framework, which allows to simultaneously learn the internal distributions of several images, by using a single model with spatially varying image-identity conditioning. Our BlendGAN opens the door to applications that are not supported by single-image models, including morphing, melding, and structure-texture fusion between two or more arbitrary images.