arXiv reaDer
Deep Iterative Frame Interpolation for Full-frame Video Stabilization
  ビデオの安定化は、高品質のビデオのための基本的かつ重要なテクニックです。これまでの作品では、ビデオの安定化が広く検討されてきましたが、それらのほとんどはフレーム境界のトリミングを伴い、中程度の歪みをもたらします。トリミングや低歪みなしでビデオフレームを生成できる、ビデオ安定化への新しいディープアプローチを紹介します。提案されたフレームワークは、フレーム補間技術を利用してフレーム間で生成し、フレーム間ジッタを低減します。繰り返し適用すると、安定化効果が強くなります。主な利点は、私たちのフレームワークが教師なしの方法でエンドツーエンドのトレーニングが可能なことです。さらに、このメソッドはほぼリアルタイム(15 fps)で実行できます。私たちの知る限り、これはフルフレームのビデオ安定化に対する教師なしの深いアプローチを提案する最初の作品です。最先端の方法と比較した定量的および定性的評価を通じて、この方法の利点を示します。
Video stabilization is a fundamental and important technique for higher quality videos. Prior works have extensively explored video stabilization, but most of them involve cropping of the frame boundaries and introduce moderate levels of distortion. We present a novel deep approach to video stabilization which can generate video frames without cropping and low distortion. The proposed framework utilizes frame interpolation techniques to generate in between frames, leading to reduced inter-frame jitter. Once applied in an iterative fashion, the stabilization effect becomes stronger. A major advantage is that our framework is end-to-end trainable in an unsupervised manner. In addition, our method is able to run in near real-time (15 fps). To the best of our knowledge, this is the first work to propose an unsupervised deep approach to full-frame video stabilization. We show the advantages of our method through quantitative and qualitative evaluations comparing to the state-of-the-art methods.
updated: Thu Sep 05 2019 21:38:45 GMT+0000 (UTC)
published: Thu Sep 05 2019 21:38:45 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト