arXiv reaDer
自己注意ネットワークによる教師なしの画像から画像への変換
Unsupervised Image-to-Image Translation with Self-Attention Networks
 教師なし画像変換は、ペアになっていないトレーニングデータが与えられた場合に、ソースドメインから別のターゲットドメインへの変換を学習することを目的としています。いくつかの最先端の作品は、GANベースの教師なしの画像から画像への変換で印象的な結果を生み出しています。スタイル転送などのローカルテクスチャマッピングタスクと比較して、ドメイン間の強力な幾何学的または構造的な変更をキャプチャできなかったり、複雑なシーンに不満足な結果を生成したりします。最近、SAGAN(Han Zhang、2018)は、自己注意ネットワークが畳み込みベースのGANよりも優れた結果をもたらすことを示しました。ただし、教師なしの画像から画像への変換タスクにおける自己注意ネットワークの有効性は検証されていません。この論文では、長距離依存性が強い幾何学的変化を捉えるだけでなく、すべての特徴位置からの手がかりを使用して詳細を生成するのに役立つ、自己注意ネットワークによる教師なしの画像間変換を提案します。実験では、既存の最先端の教師なし画像から画像への変換タスクと比較して、提案された方法の優位性を定性的および定量的に示します。ソースコードと結果はオンラインです:https://github.com/itsss/img2img_saおよびhttp://itsc.kr/2019/01/24/2019_img2img_sa
Unsupervised image translation aims to learn the transformation from a source domain to another target domain given unpaired training data. Several state-of-the-art works have yielded impressive results in the GANs-based unsupervised image-to-image translation. It fails to capture strong geometric or structural changes between domains, or it produces unsatisfactory result for complex scenes, compared to local texture mapping tasks such as style transfer. Recently, SAGAN (Han Zhang, 2018) showed that the self-attention network produces better results than the convolution-based GAN. However, the effectiveness of the self-attention network in unsupervised image-to-image translation tasks have not been verified. In this paper, we propose an unsupervised image-to-image translation with self-attention networks, in which long range dependency helps to not only capture strong geometric change but also generate details using cues from all feature locations. In experiments, we qualitatively and quantitatively show superiority of the proposed method compared to existing state-of-the-art unsupervised image-to-image translation task. The source code and our results are online: https://github.com/itsss/img2img_sa and http://itsc.kr/2019/01/24/2019_img2img_sa
updated: Mon Apr 20 2020 15:56:06 GMT+0000 (UTC)
published: Thu Jan 24 2019 05:59:40 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト