arXiv reaDer
VVCの品質向上と超解像のためのマルチタスク学習
Multitask Learning for VVC Quality Enhancement and Super-Resolution
汎用ビデオコーディング(VVC)と呼ばれる最新のビデオコーディング標準には、コーディングチェーンのさまざまなレベルにあるいくつかの斬新で洗練されたコーディングツールが含まれています。これらのツールは、以前の標準である高効率ビデオコーディング(HEVC)に比べて大幅なコーディングの向上をもたらします。ただし、エンコーダは、主にビットレートを使用可能な帯域幅に調整するために適用されるコーディング決定によって引き起こされる、目に見えるコーディングアーティファクトを導入する可能性があります。したがって、デコードされたビデオの品質を向上させるために、一般に前処理および後処理技術がコーディングパイプラインに追加されます。これらの方法は、深層学習の最近の進歩のおかげで、従来のアプローチと比較して最近優れた結果を示しています。一般に、複数のニューラルネットワークは、異なるタスクを実行するように独立してトレーニングされているため、モデル間に存在する冗長性のメリットを享受できません。この論文では、デコードされたVVCビデオ品質を向上させるための後処理ステップとして、学習ベースのソリューションを調査します。私たちの方法は、マルチタスク学習に依存して、複数の劣化レベルに最適化された単一の共有ネットワークを使用して、品質の向上と超解像の両方を実行します。提案されたソリューションは、従来の特殊なアーキテクチャと比較して、少ないネットワークパラメータで、コーディングアーティファクトの軽減と超解像の両方で優れたパフォーマンスを実現します。
The latest video coding standard, called versatile video coding (VVC), includes several novel and refined coding tools at different levels of the coding chain. These tools bring significant coding gains with respect to the previous standard, high efficiency video coding (HEVC). However, the encoder may still introduce visible coding artifacts, mainly caused by coding decisions applied to adjust the bitrate to the available bandwidth. Hence, pre and post-processing techniques are generally added to the coding pipeline to improve the quality of the decoded video. These methods have recently shown outstanding results compared to traditional approaches, thanks to the recent advances in deep learning. Generally, multiple neural networks are trained independently to perform different tasks, thus omitting to benefit from the redundancy that exists between the models. In this paper, we investigate a learning-based solution as a post-processing step to enhance the decoded VVC video quality. Our method relies on multitask learning to perform both quality enhancement and super-resolution using a single shared network optimized for multiple degradation levels. The proposed solution enables a good performance in both mitigating coding artifacts and super-resolution with fewer network parameters compared to traditional specialized architectures.
updated: Fri Apr 16 2021 19:05:26 GMT+0000 (UTC)
published: Fri Apr 16 2021 19:05:26 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト