arXiv reaDer
パッチ-VQ:ビデオ品質の問題の「パッチアップ」
Patch-VQ: 'Patching Up' the Video Quality Problem
参照なし(NR)の知覚ビデオ品質評価(VQA)は、ソーシャルおよびストリーミングメディアアプリケーションにとって複雑で未解決の重要な問題です。数十億の共有された、多くの場合不完全なユーザー生成コンテンツ(UGC)の処理を監視およびガイドするには、効率的で正確なビデオ品質予測子が必要です。残念ながら、現在のNRモデルは、実際の「インザワイルド」UGCビデオデータの予測機能に制限があります。この問題の進展を進めるために、39、000の実世界の歪んだビデオと117、000の時空間ローカライズされたビデオパッチ(「vパッチ」)、および550万の人間の知覚を含む最大の(はるかに)主観的なビデオ品質データセットを作成しました品質の注釈。これを使用して、2つの独自のNR-VQAモデルを作成しました。(a)グローバルビデオ品質の予測を学習し、3で最先端のパフォーマンスを実現する、ローカルからグローバルへのリージョンベースのNR VQAアーキテクチャ(PVQと呼ばれる) UGCデータセット、および(b)空間と時間の知覚的歪みのローカライズと視覚化を支援する、初めての時空間ビデオ品質マッピングエンジン(PVQマッパーと呼ばれる)。レビュープロセスの直後に、新しいデータベースと予測モデルを利用できるようにします。
No-reference (NR) perceptual video quality assessment (VQA) is a complex, unsolved, and important problem to social and streaming media applications. Efficient and accurate video quality predictors are needed to monitor and guide the processing of billions of shared, often imperfect, user-generated content (UGC). Unfortunately, current NR models are limited in their prediction capabilities on real-world, "in-the-wild" UGC video data. To advance progress on this problem, we created the largest (by far) subjective video quality dataset, containing 39, 000 realworld distorted videos and 117, 000 space-time localized video patches ('v-patches'), and 5.5M human perceptual quality annotations. Using this, we created two unique NR-VQA models: (a) a local-to-global region-based NR VQA architecture (called PVQ) that learns to predict global video quality and achieves state-of-the-art performance on 3 UGC datasets, and (b) a first-of-a-kind space-time video quality mapping engine (called PVQ Mapper) that helps localize and visualize perceptual distortions in space and time. We will make the new database and prediction models available immediately following the review process.
updated: Fri Nov 27 2020 03:46:44 GMT+0000 (UTC)
published: Fri Nov 27 2020 03:46:44 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト