基于对比度的小波图像融合算法研究∗
王世立
(中国人民解放军91404部队秦皇岛066000)
图像融合可以集成多个源图像中的冗余和互补信息,增加图像理解的全面性,获得对同一场景的更为准确可靠的图像描述。传统的小波图像融合方法的融合规则是分别对低频和高频系数进行处理,忽略了其中的联系,论文定义一种对比度将高频系数和低频系数的处理联系起来,并以对比度的大小作为度量系数取舍的准则进行图像融合。经实验仿真研究表明,该文算法获得的融合结果都获得了良好的效果。
图像融合;多聚焦;小波变换;对比度
Class NumberTP391
图像融合是指综合来自多个传感器对同一场景的图像数据,充分利用彼此间的互补信息,以获得更精确和全面的描述[1~2]。基于小波变换的图像融合方法具有融合效果好的突出特点,已成为图像融合应用和研究的热点。基于小波变换的融合算法的步骤为[3]:1)将图像进行小分解,得到各层各分量对应的小波系数;2)选取融合规则,对各系数进行运算选取;3)对处理后的系数进行小波逆变换得到融合图像。在图像融合算法中,融合规则的选取是至关重要的,它直接影响融合后图像的质量。目前融合规则可分为两大类:基于像素的融合规则和基于区域的融合规则[4]。基于像素的融合规则是指融合规则只对指定的单个像素进行运算,不涉及其邻域,而基于区域的融合规则充分考虑其邻域内像素的相关性,融合效果更好,应用更多。目前基于区域的融合规则主要有基于区域方差和基于区域能量的融合算法两种[5]。图像经小波分解后得到一个低频子图像和多个高频子图像,低频子图像代表了图像的近似分量,高频分量代表了图像的细节分量,现有的融合规则是单独对低频分量或高频分量处理,忽略了高频与低频分量之间的联系,本文提出一种对比度概念,将低频分量和高频分量联系起来,进而提出一种基于对比度的小波图像融合算法,选取对比度高的系数作为融合系数。仿真实验结果表明该方法能取得较好的融合效果。
假设两幅图像为A(x,y)和B(x,y),用(x,y)表示任意像素的坐标,用giA(x,y)与fiA(x,y),gB(x,y)与fB(x,y)(其中i=1,2,…,N)表示原图
i
i像A和B分别经离散小波变换分解后的高频和低频子带系数。原图像经过图像变换分解后的高频子带系数代表了原图像的细节信息,细节信息越多,说明清晰度越高[6]。莆恬[7]将对比度概念应用于多传感器图像融合之中,图像对比度C一般定义为
式中,LP为图像局部灰度,LB为图像局部背景灰度(相当于图像变换后的低频分量),LH=LP-LB则相当于图像变换后的高频分量。考虑到图像像素之间的相关性,基于传统的对比度概念,定义图像中各像素的新的对比度如下
式中,N(x,y)为以像素(x,y)为中心定义的矩形窗口(一般较小,9×9如像素)。CI(x,y)越大,说明原图像I中像素(x,y)所在局部区域对比度越大,对应像素越清晰。
本文在传统对比度的基础上,定义一种新的对比度将高频分量和低频分量联系起来,提出一种基于对比度的小波图像融合算法。该算法的实现步骤如下:
1)离散小波对两幅待融合图像进行小波分解,得到低频子带系数和一系列高频子带系数;
2)对高频和低频子带系数遍历计算像素的对比度;
3)对高频和低频子带系数按照相应的融合规则选取融合系数;
4)小波重构得到融合图像。
图像分解后的高频子带系数代表了细节分量,对比度高的像素是希望得到的像素,故定义高频子带的融合规则如下
图像分解后的低频子带系数代表了近似分量且位于最高层,常用的融合规则为简单的像素选择或者加权平均,因本文对比度定义联系了低频与高频子带系数,所以只需选择对比度高的像素,即
为验证本文算法的性能,对多聚焦图像进行融合实验,分别与加权平均融合和小波分解融合[8]比较。图1为左聚焦原始图像,图2为右聚焦原始图像,图3为加权平均融合图像,图4为小波分解后低频取平均,高频绝对值选大的融合图像,图5为本文算法融合图像。
图1 左聚焦图像
图2 右聚焦图像
图3 加权平均融合图像
图4 小波分解融合图像
图5 本文算法融合图像
主观分析上看,加权平均融合的结果相比原图像更清晰,但是模糊了原图像中的清晰部分,对比度降低。采用小波分解算法融合的结果相对加权平均融合的结果较清晰,对比度也得到提升。本文算法的融合结果与小波分解算法的融合结果相似,对比度得到了提升,但是图5的灰度范围比图4的稍大,更符合人眼的视觉特性。
以客观评价指标标准差和熵[9],对实验结果进行评价。标准差和熵可以分别表示为
其中u为图像像素灰度的平均值,图像的大小为M×N,P(l)为图像像素的概率。标准差越大,则灰度级越分散,动态范围大;熵反映了图像的平均信息量,熵越大,信息越丰富。三种融合算法结果量化指标如表1所示。
表1 融合效果具体量化指标比较
从量化结果上可以看出,本文提出的基于对比度的小波图像融合算法的结果标准差和熵比加权平均融合算法、小波分解算法都高,说明本文算法的融合结果对比度更高,图像更清晰,所含信息量更大。
图像的对比度是图像质量的一项重要指标,也是符合人眼特性的指标[10]。本文在传统对比度定义的基础上定义了一种新的对比度,它将图像分解后的高频系数与低频系数联系起来。以本文提出的对比度为度量设定融合规则,提出了一种基于对比度的小波图像融合算法,通过对此算法的实验仿真分析,图像融合的效果得到提高。
[1]敬忠良,肖刚.图像融合——理论与应用[M].北京:高等教育出版社,2007:84-85.
JING Zhongliang,XIAO Gang.Image Fusion—Theory& Application[M].Beijing:Higher Education Press,2007:84-85.
[2]何友,王国宏.多传感器信息融合与应用[M].北京:电子工业出版社,2000:35-36.
HE You,WANG Guohong.Multisensor Data Fusion Theo⁃ry and Application[M].Beijing:Publishing House of Elec⁃tronics Indutry,2000:35-36.
[3]陶冰洁,王敬儒.采用小波分析的图像融合方法评述[J].计算机工程与应用,2005,25:16-19.
TAO Bingjie,WANG Jingru.Overview of Wavelet-Analy⁃sis-Based Image Fusion[J].Computer Engineering and Application,2005,25:16-19.
[4]杨波.基于小波的像素级图像融合算法研究[D].上海:上海交通大学博士学位论文,2008,23-26.
YANG Bo.Research on Wavelet-Based Pixel-Level Im⁃age Fusion Algorithms[D].Shanghai:Shanghai Jiao Tong University Doctor Degree thesis,2008,23-26.
[5]李艳杰.基于区域的多分辨率图像融合算法研究[D].长春:吉林大学,2007:7-14.
LI Yanjie.Region-based Multiresolution Image Fusion Al⁃gorithms[D].Changchun:Jilin University,2007:7-14.
[6]夏明革,何友,欧阳文.基于小波分析的图像融合评述[J].红外与激光工程,2003,32(2):177-181.
XIA Mingge,HE You,OUYANG Wen.Overview of Wave⁃let-Analysis-Based Image Fusion[J].Infrared and Laser Engineering,2003,32(2):177-181.
[7]蒲恬,方庆喆,倪国强.基于对比度的多分辨率图像融合[J].电子学报,2000,28(12):116-118.
PU Tian,FANG Qingzhe,NI Guoqiang.Contrast-Based Multiresolution Image Fusion[J].Acta Electronica Sini⁃ca,2000,28(12):116-118.
[8]毛士艺,赵巍.多传感器图像融合技术综述[J].北京航空航天大学学报,2002,28(5):512-518.
MAO Shiyi,ZHAO Wei.Comments on Multisensor Image Fusion Techniques[J].Journal of Beijing University of Aeronautics and Astronautics,2002,28(5):512-518.
[9]胡良梅,高隽,何柯峰.图像融合质量评价方法的研究[J].电子学报,2004,32(12A):218-221.
HU Liangmei,GAO Jun,HE Kefeng.Research on Quality Measures for Image Fusion[J].Acta Electronica Sinica,2004,32(12A):218-221.
[10]宫武鹏,王永仲.一种基于小波变换的红外图像对比度增强技术[J].国防科技大学学报,2000,22(6):117-119.
GONG Wupeng,WANG Yongzhong.Contrast Enhance⁃ment of Infrared Image via Wavelet Transform[J].Jour⁃nal of National University of Defense Technology,2000,22(6):117-119.
Wavelet Image Fusion Algorithm Based on Contrast
WANG Shili
(No.91404 Troops of PLA,Qinhuangdao066000)
Image fusion can integrate redundant and complementary information from multiple source images for increasing the comprehensiveness of image understanding and obtain a more accurate and reliable image of the same scne.Traditionally,fusion rules of wavelet image fusion is processing low-frequency and high-frequency coefficients separately and ignored the contact.The paper defines a contrast for contacting them,which is used as the measure to select the coefficient during image fusion.Experimen⁃tal simulation studies show that no mater in terms of subjective or objective evaluation the algorithm of this paper can get good effect in image fusion result.
image fusion,multi-focus,wave transform,contrast
TP391
10.3969/j.issn.1672-9722.2017.05.016
2016年11月13日,
2016年12月24日
王世立,男,硕士,助理工程师,研究方向:信息融合技术。