arXiv reaDer
FAIVConf:低ビットレートのAIベースのビデオ会議の顔の強化
FAIVConf: Face enhancement for AI-based Video Conference with Low Bit-rate
最近、より少ない伝送ビットでの高品質のビデオ会議は、非常に熱く、挑戦的な問題になっています。効果的なニューラル人間の顔生成技術に基づいて、ビデオ会議用に特別に設計されたビデオ圧縮フレームワークであるFAIVConfを提案します。 FAIVConfは、実際のビデオ会議シナリオでのシステムの堅牢性を向上させるために、いくつかの設計をまとめています。背景アニメーションのアーティファクトを回避するためのフェイススワッピング。送信ビットレートを下げ、抽出された顔のランドマークの品質を維持するための顔のぼかし。広範囲の頭のポーズに対応するための顔ビュー補間の動的ソース更新。私たちの方法は、ビデオ会議で大幅なビットレートの削減を実現し、H.264およびH.265コーディングスキームと比較して、同じビットレートではるかに優れた視覚品質を提供します。
Recently, high-quality video conferencing with fewer transmission bits has become a very hot and challenging problem. We propose FAIVConf, a specially designed video compression framework for video conferencing, based on the effective neural human face generation techniques. FAIVConf brings together several designs to improve the system robustness in real video conference scenarios: face-swapping to avoid artifacts in background animation; facial blurring to decrease transmission bit-rate and maintain the quality of extracted facial landmarks; and dynamic source update for face view interpolation to accommodate a large range of head poses. Our method achieves a significant bit-rate reduction in the video conference and gives much better visual quality under the same bit-rate compared with H.264 and H.265 coding schemes.
updated: Fri Jul 08 2022 18:29:06 GMT+0000 (UTC)
published: Fri Jul 08 2022 18:29:06 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト