arXiv reaDer
ブラインド画像品質評価のための品質認識事前トレーニング済みモデル
Quality-aware Pre-trained Models for Blind Image Quality Assessment
ブラインド イメージ品質評価 (BIQA) は、近年ディープ ラーニング ベースの方法によってパフォーマンスが改善された単一の画像の知覚品質を自動的に評価することを目的としています。ただし、ラベル付けされたデータが不足しているため、深層学習ベースの BIQA メソッドがその可能性を最大限に発揮することがいくらか制限されています。この論文では、自己教師あり学習方式で BIQA 用にカスタマイズされた口実タスクによって問題を解決することを提案します。これにより、何桁も多くのデータから表現を学習できます。学習プロセスを制限するために、単純な仮定に基づいて品質を意識したコントラスト損失を提案します。歪んだ画像からのパッチの品質は似ているはずですが、同じ画像からのパッチとは異なる劣化と異なる画像からのパッチとは異なります。さらに、既存の劣化過程を改善し、約2×10^7サイズの劣化空間を形成します。私たちの方法を使用して ImageNet で事前トレーニングした後、モデルは画質に対してより敏感になり、下流の BIQA タスクで大幅に優れたパフォーマンスを発揮します。実験結果は、私たちの方法が一般的なBIQAデータセットで顕著な改善をもたらすことを示しています。
Blind image quality assessment (BIQA) aims to automatically evaluate the perceived quality of a single image, whose performance has been improved by deep learning-based methods in recent years. However, the paucity of labeled data somewhat restrains deep learning-based BIQA methods from unleashing their full potential. In this paper, we propose to solve the problem by a pretext task customized for BIQA in a self-supervised learning manner, which enables learning representations from orders of magnitude more data. To constrain the learning process, we propose a quality-aware contrastive loss based on a simple assumption: the quality of patches from a distorted image should be similar, but vary from patches from the same image with different degradations and patches from different images. Further, we improve the existing degradation process and form a degradation space with the size of roughly 2×10^7. After pre-trained on ImageNet using our method, models are more sensitive to image quality and perform significantly better on downstream BIQA tasks. Experimental results show that our method obtains remarkable improvements on popular BIQA datasets.
updated: Thu Mar 23 2023 06:57:56 GMT+0000 (UTC)
published: Wed Mar 01 2023 13:52:40 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト