arXiv reaDer
Non-Local ConvLSTM for Video Compression Artifact Reduction
  ビデオ圧縮アーチファクトの削減は、低品質の圧縮ビデオから高品質のビデオを回復することを目的としています。ほとんどの既存のアプローチでは、このタスクに単一の隣接フレームまたは隣接フレームのペア(ターゲットフレームの前および/または後)を使用します。さらに、全体的に高品質のフレームには低品質のパッチが含まれる場合があり、全体的に低品質のフレームに高品質のパッチが存在する可能性があるため、近くのピーク品質フレーム(PQF)に焦点を当てた現在の方法では、低品質の高品質のフレーム。これらの欠点を改善するために、本書では、複数の連続フレームを活用する非ローカルConvLSTM(略してNL-ConvLSTM)と呼ばれる新しいエンドツーエンドのディープニューラルネットワークを提案します。 NL-ConvLSTMには、グローバルモーションパターンをキャプチャし、ビデオシーケンスの時空間依存性をトレースするための近似的な非ローカル戦略が導入されています。このおおよその戦略により、非ローカルモジュールは高速かつ低スペースコストで動作します。この方法では、ターゲットフレームの前後のフレームを使用して残差を生成し、そこから高品質のフレームを再構築します。 2つのデータセットの実験は、NL-ConvLSTMが既存の方法よりも優れていることを示しています。
Video compression artifact reduction aims to recover high-quality videos from low-quality compressed videos. Most existing approaches use a single neighboring frame or a pair of neighboring frames (preceding and/or following the target frame) for this task. Furthermore, as frames of high quality overall may contain low-quality patches, and high-quality patches may exist in frames of low quality overall, current methods focusing on nearby peak-quality frames (PQFs) may miss high-quality details in low-quality frames. To remedy these shortcomings, in this paper we propose a novel end-to-end deep neural network called non-local ConvLSTM (NL-ConvLSTM in short) that exploits multiple consecutive frames. An approximate non-local strategy is introduced in NL-ConvLSTM to capture global motion patterns and trace the spatiotemporal dependency in a video sequence. This approximate strategy makes the non-local module work in a fast and low space-cost way. Our method uses the preceding and following frames of the target frame to generate a residual, from which a higher quality frame is reconstructed. Experiments on two datasets show that NL-ConvLSTM outperforms the existing methods.
updated: Sun Oct 27 2019 15:45:41 GMT+0000 (UTC)
published: Sun Oct 27 2019 15:45:41 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト