この作品では、挑戦的でありながら実用的な風景画像の塗りつぶし作業に取り組むことを目指しています。最近、生成的敵対的学習は、与えられた画像の意味的に一貫したコンテンツを生成することにより、画像のアウトペインティングを大幅に進歩させました。ただし、既存の方法は常にぼやけたテクスチャと生成部分のアーティファクトに悩まされており、全体的なアウトペインティングの結果は信頼性に欠けています。弱点を克服するために、この作業では、Reference-Guided Outpainting(ReGO)という名前の、隣接するピクセル(つまり、参照画像)からピクセルを借用することにより、テクスチャが豊富な結果を合成する主な方法を調査します。特に、ReGOは、ターゲット画像のテクスチャ補正のために参照画像のピクセルを転送するための適応コンテンツ選択(ACS)モジュールを設計します。生成されたパーツのスタイルが参照画像の影響を受けないようにするために、スタイルのランク付けの損失をさらに提案して、ReGOを拡張し、スタイルに一貫した結果を合成します。 NS6K〜yangzxとNS8K〜wangの2つの人気のあるベンチマークでの広範な実験は、ReGOの有効性をよく示しています。
We aim to tackle the challenging yet practical scenery image outpainting task in this work. Recently, generative adversarial learning has significantly advanced the image outpainting by producing semantic consistent content for the given image. However, the existing methods always suffer from the blurry texture and the artifacts of the generative part, making the overall outpainting results lack authenticity. To overcome the weakness, this work investigates a principle way to synthesize texture-rich results by borrowing pixels from its neighbors (i.e. , reference images), named Reference-Guided Outpainting (ReGO). Particularly, the ReGO designs an Adaptive Content Selection (ACS) module to transfer the pixel of reference images for texture compensating of the target one. To prevent the style of the generated part from being affected by the reference images, a style ranking loss is further proposed to augment the ReGO to synthesize style-consistent results. Extensive experiments on two popular benchmarks, NS6K~yangzx and NS8K~wang, well demonstrate the effectiveness of our ReGO.