arXiv reaDer
UGC-VQA:ユーザー作成コンテンツのブラインドビデオ品質評価のベンチマーク
UGC-VQA: Benchmarking Blind Video Quality Assessment for User Generated Content
 近年、手頃な価格で信頼性の高いコンシューマーキャプチャデバイスの進化とソーシャルメディアプラットフォームの絶大な人気のおかげで、インターネット上で共有およびストリーミングされるユーザー生成コンテンツ(UGC)ビデオが爆発的に増加しています。したがって、この膨大なコンテンツを監視、制御、および最適化するために、UGC /コンシューマービデオの正確なビデオ品質評価(VQA)モデルが強く求められています。 UGCコンテンツの品質低下は予測不可能で複雑であり、しばしば混ざり合うため、野生のビデオのブラインド品質予測は非常に困難です。ここでは、固定評価アーキテクチャで主要な非参照/ブラインドVQA(BVQA)機能とモデルの包括的な評価を実施することにより、UGC-VQA問題の進行に貢献し、主観的なビデオ品質の研究とVQAモデル設計の両方に関する新しい経験的な洞察をもたらします。主要なVQAモデル機能に加えて機能選択戦略を採用することにより、主要なモデルで使用されている763個の統計的特徴のうち60個を抽出して、新しいフュージョンベースのBVQAモデルを作成できます。これは、VIDeo品質のEVALuator(VIDEVAL)と呼ばれます。 VQAのパフォーマンスと効率のトレードオフのバランスを効果的にとります。私たちの実験結果は、VIDEVALが他の主要なモデルよりもかなり低い計算コストで最先端のパフォーマンスを実現することを示しています。私たちの研究プロトコルは、UGC-VQA問題の信頼できるベンチマークも定義します。これは、ディープラーニングベースのVQAモデリング、および知覚的に最適化された効率的なUGCビデオ処理、トランスコーディング、およびストリーミングに関するさらなる研究を促進すると考えています。再現性のある調査と評価を促進するために、VIDEVALの実装がオンラインで利用可能になりました:https://github.com/tu184044109/VIDEVAL_release。
Recent years have witnessed an explosion of user-generated content (UGC) videos shared and streamed over the Internet, thanks to the evolution of affordable and reliable consumer capture devices, and the tremendous popularity of social media platforms. Accordingly, there is a great need for accurate video quality assessment (VQA) models for UGC/consumer videos to monitor, control, and optimize this vast content. Blind quality prediction of in-the-wild videos is quite challenging, since the quality degradations of UGC content are unpredictable, complicated, and often commingled. Here we contribute to advancing the UGC-VQA problem by conducting a comprehensive evaluation of leading no-reference/blind VQA (BVQA) features and models on a fixed evaluation architecture, yielding new empirical insights on both subjective video quality studies and VQA model design. By employing a feature selection strategy on top of leading VQA model features, we are able to extract 60 of the 763 statistical features used by the leading models to create a new fusion-based BVQA model, which we dub the VIDeo quality EVALuator (VIDEVAL), that effectively balances the trade-off between VQA performance and efficiency. Our experimental results show that VIDEVAL achieves state-of-the-art performance at considerably lower computational cost than other leading models. Our study protocol also defines a reliable benchmark for the UGC-VQA problem, which we believe will facilitate further research on deep learning-based VQA modeling, as well as perceptually-optimized efficient UGC video processing, transcoding, and streaming. To promote reproducible research and public evaluation, an implementation of VIDEVAL has been made available online: https://github.com/tu184044109/VIDEVAL_release.
updated: Sat Apr 17 2021 04:40:56 GMT+0000 (UTC)
published: Fri May 29 2020 00:39:20 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト