arXiv reaDer
自然性分析を使用したブラインド立体画質評価のためのマルチタスク畳み込みニューラルネットワーク
A Multi-task convolutional neural network for blind stereoscopic image quality assessment using naturalness analysis
この論文は、新しいマルチタスク深層学習ベースの方法を使用して、ブラインド立体画像品質評価(NR-SIQA)の問題に対処します。立体視の分野では、情報は両眼現象だけでなく、左右のビューの間でも公平に分散されます。この作業では、畳み込みニューラルネットワークを介して参照せずに立体画像の品質を推定するためにこれらの特性を統合することを提案します。私たちの方法は、2つの主要なタスクに基づいています。最初のタスクはステレオ画像に適合した特徴に基づく自然性分析を予測し、2番目のタスクはそのような画像の品質を予測します。前者のいわゆる補助タスクは、品質予測を改善するためのより堅牢で関連性のある機能を見つけることを目的としています。これを行うために、複素ウェーブレットドメインでNatural Scene Statistics(NSS)モデルを使用して自然性ベースの特徴を計算します。これにより、立体画像のペア間の統計的依存関係をキャプチャできます。実験は、よく知られているLIVE PHASEIおよびLIVEPHASEIIデータベースで実施されます。得られた結果は、最先端の方法と比較した場合の私たちの方法の関連性を示しています。私たちのコードはhttps://github.com/Bourbia-Salima/multitask-cnn-nrsiqa_2021からオンラインで入手できます。
This paper addresses the problem of blind stereoscopic image quality assessment (NR-SIQA) using a new multi-task deep learning based-method. In the field of stereoscopic vision, the information is fairly distributed between the left and right views as well as the binocular phenomenon. In this work, we propose to integrate these characteristics to estimate the quality of stereoscopic images without reference through a convolutional neural network. Our method is based on two main tasks: the first task predicts naturalness analysis based features adapted to stereo images, while the second task predicts the quality of such images. The former, so-called auxiliary task, aims to find more robust and relevant features to improve the quality prediction. To do this, we compute naturalness-based features using a Natural Scene Statistics (NSS) model in the complex wavelet domain. It allows to capture the statistical dependency between pairs of the stereoscopic images. Experiments are conducted on the well known LIVE PHASE I and LIVE PHASE II databases. The results obtained show the relevance of our method when comparing with those of the state-of-the-art. Our code is available online on https://github.com/Bourbia-Salima/multitask-cnn-nrsiqa_2021.
updated: Mon Jun 21 2021 12:33:11 GMT+0000 (UTC)
published: Thu Jun 17 2021 08:13:51 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト