arXiv reaDer
RCLC: ROI-based joint conventional and learning video compression
COVID-19は、これまでに見られたリモートインタラクティブシステムに対する高い需要につながります。これらのシステムの重要な要素の1つは、ビデオストリーミングです。これは、特に高解像度ビデオの場合、特定のリアルタイム需要のために非常に高いネットワーク帯域幅を必要とします。既存のビデオ圧縮方法は、ビデオ品質と速度要件の間のトレードオフで苦労しています。ほとんどのリモート会議の場合、背景情報がほとんど変更されないことに対処し、最先端の学習ベースおよび従来のテクノロジーを活用する関心領域(ROI)ベースのビデオ圧縮フレームワーク(RCLCという名前)を導入します。 RCLCでは、着信する各フレームは、バックグラウンド更新(BU)またはROI更新(RU)フレームとしてマークされます。従来のビデオコーデックを適用することにより、BUフレームは低品質および高圧縮で圧縮され、RUフレームからのROIは高品質および低圧縮で圧縮されます。学習ベースの方法は、ROIを検出し、背景とROIをブレンドし、ビデオ品質を向上させるために適用されます。実験結果は、私たちのRCLCが、1080pの解像度で同様の圧縮時間の下で、H.265ビデオコーデックと比較して、ROI領域で最大32.55%のBDレートを削減できることを示しています。
COVID-19 leads to the high demand for remote interactive systems ever seen. One of the key elements of these systems is video streaming, which requires a very high network bandwidth due to its specific real-time demand, especially with high-resolution video. Existing video compression methods are struggling in the trade-off between video quality and the speed requirement. Addressed that the background information rarely changes in most remote meeting cases, we introduce a Region-Of-Interests (ROI) based video compression framework (named RCLC) that leverages the cutting-edge learning-based and conventional technologies. In RCLC, each coming frame is marked as a background-updating (BU) or ROI-updating (RU) frame. By applying the conventional video codec, the BU frame is compressed with low-quality and high-compression, while the ROI from RU-frame is compressed with high-quality and low-compression. The learning-based methods are applied to detect the ROI, blend background-ROI, and enhance video quality. The experimental results show that our RCLC can reduce up to 32.55% BD-rate for the ROI region compared to H.265 video codec under a similar compression time with 1080p resolution.
updated: Wed Jul 14 2021 05:38:37 GMT+0000 (UTC)
published: Wed Jul 14 2021 05:38:37 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト