arXiv reaDer
CAP-VSTNet: Content Affinity Preserved Versatile Style Transfer
CAP-VSTNet: Content Affinity Preserved Versatile Style Transfer
機能やピクセル アフィニティを含むコンテンツ アフィニティの損失は、写真のようにリアルなビデオ スタイルの転送でアーティファクトにつながる主な問題です。この論文では、CAP-VSTNet という名前の新しいフレームワークを提案します。このフレームワークは、新しい可逆残差ネットワークとバイアスのない線形変換モジュールで構成され、多用途のスタイル転送を実現します。この可逆的な残差ネットワークは、コンテンツの親和性を維持するだけでなく、従来の可逆的なネットワークのように冗長な情報を導入しないため、より優れた様式化を容易にします。提案されたフレームワークは、線形変換によって引き起こされるピクセル アフィニティ ロスの問題に対処できるマッティング ラプラシアン トレーニング ロスによって強化され、汎用性の高いスタイル転送に適用可能で効果的です。広範な実験により、CAP-VSTNet は最先端の方法と比較して、定性的および定量的に優れた結果を生成できることが示されています。
Content affinity loss including feature and pixel affinity is a main problem which leads to artifacts in photorealistic and video style transfer. This paper proposes a new framework named CAP-VSTNet, which consists of a new reversible residual network and an unbiased linear transform module, for versatile style transfer. This reversible residual network can not only preserve content affinity but not introduce redundant information as traditional reversible networks, and hence facilitate better stylization. Empowered by Matting Laplacian training loss which can address the pixel affinity loss problem led by the linear transform, the proposed framework is applicable and effective on versatile style transfer. Extensive experiments show that CAP-VSTNet can produce better qualitative and quantitative results in comparison with the state-of-the-art methods.
updated: Fri Mar 31 2023 08:01:21 GMT+0000 (UTC)
published: Fri Mar 31 2023 08:01:21 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト