arXiv reaDer
DeltaGAN: Towards Diverse Few-shot Image Generation with Sample-Specific Delta
少数ショット画像生成と呼ばれる少数の画像のみに基づいて新しいカテゴリの新しい画像を生成することを学ぶことは、ますます研究の関心を集めています。いくつかの最先端の作品は印象的な結果をもたらしましたが、多様性はまだ限られています。この作業では、再構築サブネットワークと生成サブネットワークで構成される、新しいDelta Generative Adversarial Network(DeltaGAN)を提案します。再構成サブネットワークは、同じカテゴリのペア間のカテゴリ内変換、つまり「デルタ」をキャプチャします。生成サブネットワークは、入力画像のサンプル固有の「デルタ」を生成します。これは、この入力画像と組み合わされて、同じカテゴリー内の新しい画像を生成します。さらに、敵対的なデルタマッチングロスは、上記の2つのサブネットワークをリンクするように設計されています。 5つの少数ショット画像データセットに対する広範な実験は、提案された方法の有効性を示しています。
Learning to generate new images for a novel category based on only a few images, named as few-shot image generation, has attracted increasing research interest. Several state-of-the-art works have yielded impressive results, but the diversity is still limited. In this work, we propose a novel Delta Generative Adversarial Network (DeltaGAN), which consists of a reconstruction subnetwork and a generation subnetwork. The reconstruction subnetwork captures intra-category transformation, i.e., "delta", between same-category pairs. The generation subnetwork generates sample-specific "delta" for an input image, which is combined with this input image to generate a new image within the same category. Besides, an adversarial delta matching loss is designed to link the above two subnetworks together. Extensive experiments on five few-shot image datasets demonstrate the effectiveness of our proposed method.
updated: Wed Apr 14 2021 02:44:46 GMT+0000 (UTC)
published: Fri Sep 18 2020 11:25:05 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト