arXiv reaDer
FineNet:顔ビデオのブレ除去のためのフレーム補間と拡張
FineNet: Frame Interpolation and Enhancement for Face Video Deblurring
この作品の目的は、顔のビデオをぼかすことです。この問題に2つの方向から取り組む方法を提案します:(1)ぼやけたフレームを強調すること、および(2)ぼやけたフレームを欠落値として扱い、補間によってそれらを推定することです。これらのアプローチは互いに補完的であり、それらの組み合わせは個々のアプローチよりも優れています。また、顔の構造を活用してビデオフレーム間の位置オフセットを見つける新しいモジュールを紹介します。このモジュールは、両方のアプローチの処理パイプラインに統合でき、最終結果の品質を向上させます。 3つの実際のおよび合成的に生成されたぼやけたビデオデータセットでの実験は、私たちの方法が定量的および定性的結果の両方の点で以前の最先端の方法を大幅に上回っていることを示しています。
The objective of this work is to deblur face videos. We propose a method that tackles this problem from two directions: (1) enhancing the blurry frames, and (2) treating the blurry frames as missing values and estimate them by interpolation. These approaches are complementary to each other, and their combination outperforms individual ones. We also introduce a novel module that leverages the structure of faces for finding positional offsets between video frames. This module can be integrated into the processing pipelines of both approaches, improving the quality of the final outcome. Experiments on three real and synthetically generated blurry video datasets show that our method outperforms the previous state-of-the-art methods by a large margin in terms of both quantitative and qualitative results.
updated: Mon Mar 01 2021 09:47:16 GMT+0000 (UTC)
published: Mon Mar 01 2021 09:47:16 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト