arXiv reaDer
SwiftSRGAN-効率的でリアルタイムの推論のための超解像の再考
SwiftSRGAN -- Rethinking Super-Resolution for Efficient and Real-time Inference
近年、最先端のディープラーニングベースのアーキテクチャを使用した画像の超解像のタスクにいくつかの進歩がありました。以前に公開された多くの超解像ベースの技術では、画像の超解像を実行するために、ハイエンドで最高級のグラフィックスプロセッシングユニット(GPU)が必要です。ディープラーニングアプローチの進歩が進むにつれ、ニューラルネットワークはますますコンピューティングに飢えています。私たちは一歩後退し、リアルタイムで効率的なソリューションの作成に焦点を合わせました。メモリフットプリントの観点から、より高速でより小さなアーキテクチャを紹介します。提案されたアーキテクチャは、深さ方向の分離可能な畳み込みを使用して特徴を抽出し、リアルタイムの推論と低いメモリフットプリントを維持しながら、他の超解像GAN(Generative Adversarial Networks)と同等のパフォーマンスを発揮します。リアルタイムの超解像により、帯域幅が狭い状況でも高解像度のメディアコンテンツをストリーミングできます。精度とレイテンシーの間の効率的なトレードオフを維持しながら、超解像GANのサイズの1/8(1/8)であり、超解像GANの74倍の速度で計算する同等のパフォーマンスモデルを作成できます。
In recent years, there have been several advancements in the task of image super-resolution using the state of the art Deep Learning-based architectures. Many super-resolution-based techniques previously published, require high-end and top-of-the-line Graphics Processing Unit (GPUs) to perform image super-resolution. With the increasing advancements in Deep Learning approaches, neural networks have become more and more compute hungry. We took a step back and, focused on creating a real-time efficient solution. We present an architecture that is faster and smaller in terms of its memory footprint. The proposed architecture uses Depth-wise Separable Convolutions to extract features and, it performs on-par with other super-resolution GANs (Generative Adversarial Networks) while maintaining real-time inference and a low memory footprint. A real-time super-resolution enables streaming high resolution media content even under poor bandwidth conditions. While maintaining an efficient trade-off between the accuracy and latency, we are able to produce a comparable performance model which is one-eighth (1/8) the size of super-resolution GANs and computes 74 times faster than super-resolution GANs.
updated: Mon Nov 29 2021 04:20:15 GMT+0000 (UTC)
published: Mon Nov 29 2021 04:20:15 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト