既存の顔復元モデルは、顔領域の特性を考慮しない一般的な評価指標に依存しています。したがって、最近の研究では、人間を対象とした研究を使用して方法を評価していますが、これはスケーラブルではなく、かなりの労力を伴います。この論文では、ジェネレーターが顔の復元をシミュレートし、ディスクリミネーターが画質を評価する、敵対的フレームワークに基づく新しい顔中心のメトリックを提案します。具体的には、当社のピクセルごとの弁別器により、従来のメトリックでは提供できない解釈可能な評価が可能になります。さらに、目、鼻、口のわずかな変化でも人間の認知に大きな影響を与えることを考慮して、私たちの指標は顔の主要な領域を強調しています。私たちの顔指向の指標は、既存の一般的なまたは顔の画像品質評価指標を一貫して大幅に上回っています。さまざまなアーキテクチャ設計と困難なシナリオで、提案された戦略の一般化可能性を示します。興味深いことに、私たちの IFQA は目的関数としてパフォーマンスの改善につながることがわかりました。コードとモデルは https://github.com/VCLLab/IFQA で入手できます。
Existing face restoration models have relied on general assessment metrics that do not consider the characteristics of facial regions. Recent works have therefore assessed their methods using human studies, which is not scalable and involves significant effort. This paper proposes a novel face-centric metric based on an adversarial framework where a generator simulates face restoration and a discriminator assesses image quality. Specifically, our per-pixel discriminator enables interpretable evaluation that cannot be provided by traditional metrics. Moreover, our metric emphasizes facial primary regions considering that even minor changes to the eyes, nose, and mouth significantly affect human cognition. Our face-oriented metric consistently surpasses existing general or facial image quality assessment metrics by impressive margins. We demonstrate the generalizability of the proposed strategy in various architectural designs and challenging scenarios. Interestingly, we find that our IFQA can lead to performance improvement as an objective function. The code and models are available at https://github.com/VCLLab/IFQA.