朱亚辉
摘 要:为了进一步突出重要的图像结构特征,采用复数矩阵表示图像,提出了基于灰色复数奇异值分解的无参考模糊图像质量评价方法。该方法首先将原始模糊图像经点扩散函数生成二次模糊图像,再采用复数矩阵的形式表示原始图像和二次模糊图像的结构特征,在此基础上,对原始模糊图像和二次模糊图像进行分块复数矩阵奇异值分解,获得区域相关度,采用灰色关联度评价模糊图像质量。在3个数据库上的实验结果表明,该方法评价结果合理,与主观评价具有较好的一致性。
关键词:模糊图像质量评价;无参考;相位一致;复数矩阵;奇异值分解;灰色关联分析
中图分类号:TP391.4
文献标志码:A
1 引 言
图像在获取和处理过程中常常会导致图像模糊,需要对图像的模糊程度进行评价。模糊图像质量评价被分为两类:主观評价和客观评价。其中,主观评价是通过观察者的主观感受评价图像质量,评价过程比较复杂,主观性强,不适合实时应用。客观评价是通过计算机自动评价图像质量。其中,客观评价方法被细分为3类[1]:全参考算法、半参考算法和无参考算法。其中,全参考算法需要使用参考图像的所有信息,半参考算法只需要参考图像的部分信息,无参考算法不需要参考图像参与。在实际应用中,由于参考图像难以获得,多以研究无参考图像质量评价更具现实意义。
近年来,无参考模糊图像质量评价方法研究非常活跃,将其分为3类:第1类是基于构造参考图像的质量评价算法。例如,桑庆兵[2]使用高斯低通滤波器构造再次模糊图像,通过计算模糊图像与再次模糊图像间的梯度结构相似度来估计图像的失真程度。Li[3]将模糊图像与再次模糊图像做比较,通过模糊图像与再次模糊图像间的差异估计图像的失真程度。Fezel[4]使用可察觉模糊的概念对模糊图像进行评价;Hassen[5]等利用局部相位一致的方法对模糊图像进行评价。第2类是基于机器学习和神经网络的质量评价算法,该算法的关键是提取模糊图像的特征向量。例如,CianciO[6]等利用多种空域图像特征,采用神经网络模型对模糊图像进行评价。桑庆兵[7]等建立了模糊图像相位一致图像的灰度共生矩阵,并应用支持向量回归模型训练学习,建立无参考模糊图像的质量评价模型。桑庆兵[8]将源图像的离散余弦变换系数作为图像质量变换的特征向量,使用支持向量回归模型对特征向量进行训练,用于评价模糊图像质量。第3类是直接计算模糊图像质量的算法。例如,赵巨峰[9]用平均边缘宽度衡量图像的模糊度。
上述方法仅仅是对模糊图像的灰色值进行运算,图像灰度值蕴含图像的未知信息,模糊图像质量评价的目的在于评价图像的结构信息,在评价的过程中需要体现图像的结构信息。因此,本文提出了基于灰色复数矩阵奇异值(Grey WeightedComplex Singular Value Decomposition, GWCS-VD)的无参考模糊图像质量评价方法。该方法首先将源图像进行模糊处理,将体现图像轮廓的相位一致信息与像素信息结合构成复数矩阵;对模糊图像进行分块处理,通过计算区域复数奇异值获得局部相关度,最后通过灰色关联度获得全局相关度。通过实验分析可知,该方法获得的评价结果与主观评价具有较好的一致性。
2 模糊图像质量评价模型
本文算法的基本思想是通过原始图像与二次模糊图像之间的特征相关性评价模型图像质量。流程见图1所示。
该模型需要完成以下步骤:1)标准参考图像的构造:桑庆兵[2]和高雪妮[10]分别采用高斯低通滤波器和点扩散函数构造再次模糊图像,它们本质是一致的。本文采用基于点扩散函数产生二次模糊图像,将其作为参考图像;2)图像的复数表示:图像像素的灰度值含有图像大部分未知信息,模糊图像质量评价的侧重点在于评价图像的特征信息,例如图像轮廓信息。因此,采用复数矩阵表示图像信息,既包含了轮廓信息,也包含图像的未知信息;3)模糊图像与二次模糊图像之间的相关性计算:算法通过计算模糊图像与二次模糊图像的奇异值向量间的灰色关联度。
2.1 基于点扩散函数的二次模糊图像
假设输入的目标函数为f(x,y),输出的图像函数为g(x,y),光学成像系统可以表示为:
g(x, y)=h(x, y)×f(x,y)+n(x,y)(1)
公式(1)中h为成像系统的脉冲响应,又称点扩散函数,n为随机噪声。本文利用点扩散函数产生模糊这一性质,将图像与一个方差为σ0的高斯函数进行卷积运算来模拟一个光学系统的成像。同样,也可以将已经通过光学系统成像的图像与方程为σ1的高斯函数进行卷积运算来模拟光学系统的再成像,称为二次成像。这样,二次成像图像比第一次成像的图像变得模糊。而且,对于一次成像图像中原本清晰的部分,变得更加模糊。
二次成像的整个系统模型可以表示为:
G(x,y)=h0 (x,y)×h(x,y)×f(x,y)
通过上述变化,获得二次模糊图像G。本文将二次模糊图像G为参考图像,将模糊图像f视为比较图像。
2.2 图像结构信息的复数表示
通常情况下,实现模糊图像质量评价是获取二次模糊图像与原始模糊图像的HVS敏感结构信息,通过计算二次模糊图像与原始模糊图像结构信息的相似度,实现原始模糊图像的质量评价。
Morrone[11]等在马赫带研究过程中发现:信号的特征总是出现在其傅里叶相位叠合最大的点处,发现了相位一致性原理。相位一致是指图像的各个位置、各个频率成分的相位相似度的一种度量方式。相位一致模型符合HVS且不受图像对比度变化的影响,可在亮度改变的情况下获得可靠的图像特征信息。采用学者Kovesi[12]改进的相位一致计算模型。图2给出了模糊图像及其相位一致
由图2可以看出,相位一致图像很好地保留了图像的结构轮廓特征,包含了模糊图像质量感知特征的重要信息。模糊图像的相位一致图像的轮廓较二次模糊图像的轮廓较为清晰。因此,应用相位一致图像可以表征图像的结构特征。
王宇庆[14]指出:平衡单一特征对图像敏感程度的最好方法是采用信息组合的方法给出图像结构信息的复数表示。因此,本文采用复数表示图像的结构信息。将图像的灰度值作为实部,将其相应的相位一致图像作为虚部。因此,原始模糊图像厂与二次模糊图像G对应的复数表示分别为:
2.3 基于奇异值分解的特征提取
矩阵的奇异值包含了矩阵的主要能量特征,对于图像矩阵而言,其奇异值与图像能量特征之间存在某种关联。对于复数矩阵A,都可以分解为
3 实验结果及分析
3.1 模糊图像实验数据库和性能评价指标
常用的模糊图像质量评价公开数据库包括LIVE2、csio和TID2008,数据库中包含失真图像和它们的主观得分( Differential Mean OpinionScore,DMOS),利用DMOS,可对图像质量评价方法进行测试。表1给出了模糊图像质量评价的标准测试数据。
图像质量评价性能指标采用客观评价与主观评价一致性的常用统计指标:1)Spearman等级相关系数( SROCC)和Pearson相关系数(CC)。显然,这两个性能指标值越接近1,说明性能越好。
3.2 实验结果与分析
为了验证本文算法的有效性,将本文算法与其它模糊无参考图像质量评价方法进行比较,例如,文献[8],文献[15],文献[16]和文献[17]。不同评价算法在上述3个数据库中的性能比较见表2所示。
从表2中可以看出:一方面,本文算法在LIVE2和TID2008数据库中的SROCC值更接近于1,表示该评价方法在LIVE2数据库中评价性能好,在csio数据库中,该方法略差于文献[8]的方法,但本文算法的SROCC值的均值为0.9216,比其它评价方法更接近于1;另一方面,本文算法虽然在LIVE2数据库中的CC值更接近于1,在csio数据库和TID2008数据库的CC值略差,但3个数据库的CC均值为0.9096,较其它评价方法更接近1。因此,本文方法在LIVE2、csio和TID2008数据库上的评价结果合理和稳定,符合人眼主观评价。
4 结 论
模糊图像质量评价既需要反映模糊图像蚀变情况的灰度信息,又需要兼顾图像结构信息,本文算法通过构造图像的复数矩阵,兼顾了上述两点。在此基础上,通过点扩散函数将原始模糊图像再模糊、图像复数矩阵的构建、块复数矩阵的奇异值分解和灰色关联度等步骤,最终得到原始模糊图像的评价值。在3个常用数据库上的实验结果显示,本文算法具有较强的主观感知一致性,更加符合人眼视觉系统,且具有较好的推广性。
参考文献
[1] WANG Z,BOVIK A C.SHEIKH H R, et al. Image qualityassessment: from error visibility to structural similarity [J].IEEE Transactions on image processing, 2004, 13(4): 600 - 612.
[2]桑庆兵,苏媛媛,李朝锋,等。基于梯度结构相似度的无参考模糊图像质量评价[J].光电子·激光,2013, 24(3):573 -577.
[3] 11 C, YUAN W, BOVIK A C, et al. Ncrreference blurindex using blur comparisons [J]. Electronics Letters, 2011,47 (17):962-963.
[4] FERZLI R, KARAM L J.A No-Reference objective imagesharpness metric based on the notion of just noticeable blur[J]. IEEE Trans on image Processing, 2009, 18 (4): 717 -728.
[5]HASSEN R, WANG Z,SALAMA M. No-Reference imagesharpness assessment based on local phase coherence meas-urement[J]. Proc of the IEEE International Conference onAcoustics, Speech and Signal Processing, Dallas, USA,2010:2434-2437.
[6] CIANCIO A, DA COSTA A L N T.No-Reference Blur As-sessment of Digital Pictures Based on Multi-FeatureClassifiers [J]. IEEE Trans on Image Processing, 2011, 20(1):64-75.
[7]桑庆兵,李朝锋,吴小俊.基于灰度共生矩阵的无参考模糊图像质量评价方法[J].模糊识别与人工智能,2013,26(5):492-497.
[8]桑庆兵,齐会新,吴小俊,等.基于DCT系数无参考模糊图像质量评价方法[J].仪器仪表学报,2013, 34 (11):2599 - 2604.
[9]赵巨峰,冯华君,徐之海,等,基于模糊度和噪声水平的图像质量评价方法[J].光电子·激光,2010, 21(7):1062 -1066.
[10]高雪妮,玉振明,张军,等,基于多级分块迭代法的不同聚焦图像融合[J].电子学报,2011, 29(3) :690-694.
[11] MORRONE M C,OWENS R A. Feature detection fromlocal energy[J]. Pattern Recognition Letters, 1987,6 (5):303 - 313.
[12] KOVESI P.Image features from phase congruency[Jl.Journal of Compute Vision and Pattern Recognition, 1999,1(3):1-26.
[13]李朝鋒,唐国凤,吴小俊,等,学习相位一致特征的无参考图像质量评价[J].电子与信息学报,2013, 35( 2):484 -488.
[14]王宇庆,基于梯度复数矩阵的图像质量客观评价方法[J].计算机计算与发展,2013,20(1) :63-66.
[15]楼斌,沈海斌,赵武锋,等.基于自然图像统计的无参考图像质量评价[J].浙江大学学报:工学版,2010, 44( 2):248 -252.
[16]金波,李朝锋,吴小俊.结合NSS和小波变换的无参考图像质量评价[J].中国图象图形学报,2012, 17(1) :33-39.
[17]桑庆兵,梁狄林,吴小俊,基于支持向量回归的无参考模糊和噪声图像质量评价方法[J].光电子·激光,2014, 25(3):595-601.