arXiv reaDer
フレームツーフレームトレーニングによるモデルブラインドビデオのノイズ除去
Model-blind Video Denoising Via Frame-to-frame Training
 ビデオが生成された処理チェーンのモデリングは、カメラが利用できる場合でも、困難なリバースエンジニアリングタスクです。これにより、モデルベースのビデオ処理はさらに複雑なタスクになります。このホワイトペーパーでは、オフラインとオンラインの2つのバージョンを使用した、完全にブラインドのビデオノイズ除去方法を提案します。これは、事前にトレーニングされたAWGNノイズ除去ネットワークを新しいフレーム間トレーニング戦略でビデオに微調整することで実現されます。デノイザーは、ビデオまたはバーストの発生源、およびカメラセンサーから適用される後処理ステップを知らなくても使用できます。オンラインプロセスでは、さまざまな摂動に対して視覚的に満足のいく結果を得る前に、数フレームしか必要ありません。それにもかかわらず、標準のガウスノイズの最先端のパフォーマンスに到達し、さらに優れたパフォーマンスでオフラインで使用できます。
Modeling the processing chain that has produced a video is a difficult reverse engineering task, even when the camera is available. This makes model based video processing a still more complex task. In this paper we propose a fully blind video denoising method, with two versions off-line and on-line. This is achieved by fine-tuning a pre-trained AWGN denoising network to the video with a novel frame-to-frame training strategy. Our denoiser can be used without knowledge of the origin of the video or burst and the post processing steps applied from the camera sensor. The on-line process only requires a couple of frames before achieving visually-pleasing results for a wide range of perturbations. It nonetheless reaches state of the art performance for standard Gaussian noise, and can be used off-line with still better performance.
updated: Tue Feb 25 2020 15:56:46 GMT+0000 (UTC)
published: Fri Nov 30 2018 12:44:50 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト