arXiv reaDer
顔の画像品質評価をさらに進化: 新しいデータベースとモデル
Going the Extra Mile in Face Image Quality Assessment: A Novel Database and Model
画質評価 (IQA) のための正確な計算モデルは、画像フィルタリング、画像処理、画像生成などの多くのビジョン アプリケーションに利益をもたらします。顔画像の研究はコンピュータ ビジョン研究における重要なサブ分野ですが、顔の IQA データとモデルが不足しているため、顔の超解像度、顔の強調、顔の編集などの顔画像処理タスクに関する現在の IQA メトリクスの精度が制限されています。このギャップを埋めるために、この論文ではまず、これまでに開発された最大の注釈付き IQA データベースを紹介します。このデータベースには、非常に多様な状況にある多様な個人の 20,000 の人間の顔が含まれています。これは、既存のすべての顔の評価データセットよりも桁違いに大きいです。さらに、データベースに基づいて、顔画像の品質を正確に予測するための新しい深層学習モデルを提案します。これにより、IQA のための生成事前分布の使用が初めて検討されます。よく事前トレーニングされた既製の生成モデルにエンコードされた豊富な統計を利用することで、生成的な事前情報を取得し、それをブラインド IQA を促進するための潜在的な参照として使用します。実験結果は、提案された顔 IQA のデータセットの価値と、提案されたモデルの優れたパフォーマンスの両方を示しています。
An accurate computational model for image quality assessment (IQA) benefits many vision applications, such as image filtering, image processing, and image generation. Although the study of face images is an important subfield in computer vision research, the lack of face IQA data and models limits the precision of current IQA metrics on face image processing tasks such as face superresolution, face enhancement, and face editing. To narrow this gap, in this paper, we first introduce the largest annotated IQA database developed to date, which contains 20,000 human faces -- an order of magnitude larger than all existing rated datasets of faces -- of diverse individuals in highly varied circumstances. Based on the database, we further propose a novel deep learning model to accurately predict face image quality, which, for the first time, explores the use of generative priors for IQA. By taking advantage of rich statistics encoded in well pretrained off-the-shelf generative models, we obtain generative prior information and use it as latent references to facilitate blind IQA. The experimental results demonstrate both the value of the proposed dataset for face IQA and the superior performance of the proposed model.
updated: Sun Jul 30 2023 14:12:09 GMT+0000 (UTC)
published: Mon Jul 11 2022 14:28:18 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト