arXiv reaDer
マルチタスク敵対的学習を使用したVHSからHDTVへのビデオ翻訳
VHS to HDTV Video Translation using Multi-task Adversarial Learning
ビデオホームシステム(VHS)形式の貴重なビデオアーカイブが大量にあります。ただし、アナログの性質上、品質が悪いことがよくあります。高解像度テレビ(HDTV)と比較すると、VHSビデオは外観がくすんでいるだけでなく、解像度も低く、ぼやけて見えることがよくあります。この論文では、VHSビデオをHDTVビデオに変換する問題に焦点を当て、新しい教師なしマルチタスク敵対学習モデルに基づいたソリューションを開発しました。生成的敵対的ネットワーク(GAN)とCycleGANの成功に触発されて、私たちはサイクルの一貫性の喪失、敵対的喪失、知覚の喪失を一緒に使用して、翻訳モデルを学習します。私たちの仕事の重要な革新は、教師なしマルチタスク問題を解決できる超解像モデルと色転写モデルの組み込みです。私たちの知る限り、これはVHSとHDTVの関係の研究に専念した最初の作品であり、VHSをHDTVに変換する最初の計算ソリューションです。実験結果を提示して、ソリューションの有効性を定性的および定量的に示します。
There are large amount of valuable video archives in Video Home System (VHS) format. However, due to the analog nature, their quality is often poor. Compared to High-definition television (HDTV), VHS video not only has a dull color appearance but also has a lower resolution and often appears blurry. In this paper, we focus on the problem of translating VHS video to HDTV video and have developed a solution based on a novel unsupervised multi-task adversarial learning model. Inspired by the success of generative adversarial network (GAN) and CycleGAN, we employ cycle consistency loss, adversarial loss and perceptual loss together to learn a translation model. An important innovation of our work is the incorporation of super-resolution model and color transfer model that can solve unsupervised multi-task problem. To our knowledge, this is the first work that dedicated to the study of the relation between VHS and HDTV and the first computational solution to translate VHS to HDTV. We present experimental results to demonstrate the effectiveness of our solution qualitatively and quantitatively.
updated: Thu Jan 07 2021 06:02:58 GMT+0000 (UTC)
published: Thu Jan 07 2021 06:02:58 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト