arXiv reaDer
Discriminator-Generator Communication によるガイド付き画像から画像への変換
Guided Image-to-Image Translation by Discriminator-Generator Communication
画像から画像 (I2I) への変換の目的は、ソース ドメインからターゲット ドメインに画像を転送することであり、最近注目を集めています。この研究の主要な分野の 1 つは、Generative Adversarial Network (GAN) に基づいて I2I 変換を定式化することです。ゼロサム ゲームとして、GAN はジェネレーターの部分観測マルコフ決定プロセス (POMDP) として再定式化できます。ジェネレーターは環境の完全な状態情報にアクセスできません。この定式化は、GAN トレーニングにおける情報不足を示しています。この問題を軽減するために、ディスクリミネーターとジェネレーターの間に通信チャネルを追加することを提案します。通信メカニズムを I2I 変換フレームワークに統合するために、複数のアーキテクチャ設計を検討します。提案されたアプローチのパフォーマンスを検証するために、さまざまなベンチマーク データセットで広範な実験を実施しました。実験結果は提案した方法の優位性を確認した。
The goal of Image-to-image (I2I) translation is to transfer an image from a source domain to a target domain, which has recently drawn increasing attention. One major branch of this research is to formulate I2I translation based on Generative Adversarial Network (GAN). As a zero-sum game, GAN can be reformulated as a Partially-observed Markov Decision Process (POMDP) for generators, where generators cannot access full state information of their environments. This formulation illustrates the information insufficiency in the GAN training. To mitigate this problem, we propose to add a communication channel between discriminators and generators. We explore multiple architecture designs to integrate the communication mechanism into the I2I translation framework. To validate the performance of the proposed approach, we have conducted extensive experiments on various benchmark datasets. The experimental results confirm the superiority of our proposed method.
updated: Tue Mar 07 2023 02:29:36 GMT+0000 (UTC)
published: Tue Mar 07 2023 02:29:36 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト