arXiv reaDer
参照なしの画質評価のためのマルチプールインセプション機能
Multi-pooled Inception features for no-reference image quality assessment
画質評価(IQA)は、自動ビデオストリーミングからディスプレイ技術に至るまで、幅広いアプリケーションの重要な要素です。さらに、画質の測定には、画像の内容と特徴のバランスの取れた調査が必要です。私たちが提案するアプローチは、グローバル平均プーリング(GAP)レイヤーをImageNetデータベースの事前トレーニング済み畳み込みニューラルネットワーク(CNN)の複数のInceptionモジュールにアタッチすることによって視覚的特徴を抽出します。以前の方法とは対照的に、入力画像からパッチを取得しません。代わりに、入力画像は全体として扱われ、事前にトレーニングされたCNN本体を介して実行され、解像度に依存しないマルチレベルの深い特徴が抽出されます。結果として、私たちの方法は、任意の入力画像サイズと事前トレーニングされたCNNに簡単に一般化できます。したがって、CNNベースアーキテクチャとさまざまな深い特徴の有効性に関する詳細なパラメータ研究を提示します。 MultiGAP-NRIQAと呼ばれる私たちの最良の提案が、3つのベンチマークIQAデータベースで最先端の結果を提供できることを示しています。さらに、これらの結果は、LIVE In the Wild Image QualityChallengeデータベースを使用したクロスデータベーステストでも確認されました。
Image quality assessment (IQA) is an important element of a broad spectrum of applications ranging from automatic video streaming to display technology. Furthermore, the measurement of image quality requires a balanced investigation of image content and features. Our proposed approach extracts visual features by attaching global average pooling (GAP) layers to multiple Inception modules of on an ImageNet database pretrained convolutional neural network (CNN). In contrast to previous methods, we do not take patches from the input image. Instead, the input image is treated as a whole and is run through a pretrained CNN body to extract resolution-independent, multi-level deep features. As a consequence, our method can be easily generalized to any input image size and pretrained CNNs. Thus, we present a detailed parameter study with respect to the CNN base architectures and the effectiveness of different deep features. We demonstrate that our best proposal - called MultiGAP-NRIQA - is able to provide state-of-the-art results on three benchmark IQA databases. Furthermore, these results were also confirmed in a cross database test using the LIVE In the Wild Image Quality Challenge database.
updated: Tue Nov 10 2020 15:09:49 GMT+0000 (UTC)
published: Tue Nov 10 2020 15:09:49 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト