基于帧间高频能量和相关性的烟雾检测算法研究*

阳婷，官洪运（1.东华大学信息学院，上海201620）（2.教育部纺织工程中心，上海201620）

基于帧间高频能量和相关性的烟雾检测算法研究*

阳婷1，2，官洪运1，2
（1.东华大学信息学院，上海201620）（2.教育部纺织工程中心，上海201620）

针对视频烟雾检测中当干扰物和烟雾极为相似时容易出现误判的问题，对基于帧间高频能量和相关性的烟雾检测进行了研究。首先通过混合高斯背景模型与三帧差法提取运动目标，再利用烟雾的颜色、扩散性、形状提取疑似目标区，对目标区域用离散小波变换获取高频能量，利用帧间高频能量和相关性对疑似区域进行烟雾判断，从而确定目标是否是烟雾并给出报警。通过MATLAB和VS2010进行仿真，结果表明，该算法可以有效提高烟雾识别检测的可靠性，减少误报。

目标提取；烟雾检测；离散小波变换；能量；相关性

0 引言

火灾探测主要分为火焰和烟雾的探测。而烟雾作为火灾发生的早期现象，其检测结果的准确性直接影响火灾探测系统的可靠性，因此对视频烟雾检测算法的研究具有重要意义。而视频烟雾检测的准确性仍然是一个开放的挑战，人们也在不断地对算法进行改进以提高检测效果。Simone Calderara等人提出一种使用图像能量和颜色信息的烟雾检测算法[1]，Chen-Yu Lee等人提出了利用时空特性的烟雾检测算法[2]。Wen-hui Li等人提出了一个基于小波能量和光流法视频烟雾检测算法[3]。各种算法的研究使烟雾检测越来越准确，但也还存在一些缺陷。

（1）几种算法中都提到了烟雾能量检测，但都是以某时刻为判断单位，忽略了某时刻可能出现的暂时性干扰也有可能遮挡背景导致能量的衰减，如飘动的白色污染物。

（2）这些算法对于和烟雾特征很接近的干扰物，如雾霾、云朵等，不能做出判断，易产生误判。

针对烟雾和干扰物进行研究，本文结合烟雾的视频图像在时域和频域的特征，将烟雾的多种特征进行融合检测，提出了基于帧间高频能量和相关性的烟雾检测算法，能够有效提高烟雾检测的准确率。

1 本文算法架构

本文算法流程主要步骤：

（1）用混合高斯背景模型和帧差法对运动目标进行提取；

（2）运用烟雾的颜色、扩散性和不规则性进行目标的初步锁定，若满足条件则转到步骤（3）进行进一步的检测，否则为干扰区域进行排除，转回（1）；

（3）对视频帧进行离散小波变化，提取视频间的高频能量变化信息和帧间的相关性变化，如果满足阈值条件则进行烟雾报警，否则将目标区域排除，转回（1）。

2 运动目标提取

（1）混合高斯背景模型

在t时刻，图像中的每个像素点的像素值可用混合高斯模型表示为下式[3-4]：

其中，K为高斯模型数（本文取K=3），wi，t为t时刻第i个高斯分布函数的权值（满足，μi，t和σi，t为t时刻对应高斯分布的均值和协方差矩阵，n为像素点ft（x，y）的维数，I为单位矩阵，δ为标准差。η（ft（x，y），μi，t，σi，t）为t时刻第i个高斯分布的概率密度函数。

如果满足：|fi，t+1-ui，t+1|≤ε*σi，t+1，则匹配成功，匹配的高斯分布的均值和方差进行更新，其他的高斯分布不变。该高斯模型的参数更新如下：

其余的高斯分布权重会以wi，t+1=（1-α）wi，t进行更新。当参数更新完后，根据wi，t/σi，t降序排序后，若满足N=arg min（则为背景模型，否则为前景模型，其中Th为设定的阈值，描述背景的高斯分布所占的比例。

（2）三帧差分法

三帧差分法[5]的主要思想：从视频中连续读取3帧图像fk，fk+1，fk+2进行隔帧两两差分，并通过阈值T1将两个差分图像二值化，即：

再将两个二值图像dk1和dk2相与，得到的交集就是运动目标的基本轮廓，从而提取出前景区域。

（3）提取运动目标

将三帧差分法提取的运动区域与混合高斯模型中提取到的前景区域进行逻辑“与”，获得比较准确的运动区域，并对该区域进行“开闭”运算，除去噪声，最终提取出运动目标。

3 烟雾特征提取

（1）颜色特征

烟雾颜色大多呈灰白色，通过对大量烟雾视频的烟雾RGB颜色特征进行实验，得到烟雾颜色特征如下[6]：

其中，R1=0.314 0，R2=0.336 9，G1=0.319 0，G2= 0.337 4为实验统计值。

（2）扩散性

烟雾的扩散性[1]使烟雾面积不断变化，表现为运动目标面积的不断增大，满足：Si

其中，Pi表示视频序列中第i张图像中的疑似区域内目标的像素总数。选取扩散度阈值为D1和D2。

（3）不规则性

烟雾随着气流不断变化，表现为形状上的不规则性，其不规则性可以表示为：

SEP表示被提取出来的烟雾区域的周长，通过计算边缘像素总数来表示，STP表示被提取出来的烟雾疑似区域的面积，用包含的连通区域的像素总数描述。STD为不规则性判据，用以区别烟雾和其他形状规则的物体。

4 帧间能量和相关性

（1）能量分析

烟雾最显著的特征是由下到上并向四周逐渐扩散，这一现象会平滑背景图像使尖锐程度降低，在空域上表现为背景图像的边缘和纹理信息逐渐减少，在频域上反应为高频信息的削减[1，6]。将有烟雾的视频图像进行离散小波分解，由图1可知，烟雾的背景纹理遮挡性会削减背景的三个高频分量子图像，模糊背景的边缘和纹理等细节信息，在小波上表现为小波系数的减少。所以，利用小波系数的减少，计算三个高频分量子图像能量值，通过高频能量的变化可以判断是否有烟雾存在。

图1 视频离散小波分解图

对于t时刻的烟雾视频图像It，其运动部分（Bk）高频部分的平均能量值[7]：

此外，为了感知较小的烟雾带来的能量变化，将每一项都做平方处理。

高频能量衰减率算法如下式：

其中，QB为无烟雾的背景高频能量值，QT为出现烟雾后的背景高频能量值，（QB-QT）即为被烟雾遮挡衰减的高频能量。为了提高检测的可靠性，计算平均衰减率如下：

（2）相关性分析

烟雾在较短的时间内其形状和内部纹理结构变化快，而云朵相对来说变化缓慢。利用连续两帧的目标区域的相关性可以衡量相似性和估计运动趋势。

对于连续两帧图像的相关性可以用下式表示：

其中，xij表示第一帧图像像素（i，j）的像素值，yij表示第二帧图像像素（i，j）的像素值，x¯表示第一帧图像的像素平均值，y¯表示第二帧图像的像素平均值。

由上面对烟雾用二维小波变换的分析可知，烟雾会导致反应边缘信息的高频分量减少，所以分析连续两帧的高频分量的相关性，也可以作为烟雾判据之一。其中，设置水平、垂直、对角线的高频分量分别为ρ1、ρ2、ρ3，ρ为高频分量的总相关系数。用相关性判断烟雾的表达式如下：

其中，Th为设定的相关系数阈值。

5 实验结果

本实验在MATLAB软件平台上对烟雾图像、飘动的白色塑料袋图像、移动的云朵图像的小波能量和相关系数进行实验仿真，得到判断阈值。再在VS2010 C++实验平台上利用OPENCV库对烟雾、白色塑料袋、云朵视频图像进行烟雾识别实验。

对烟雾和飘动塑料袋的视频图像进行MATLAB实验仿真，其相应的高低频小波能量值的计算结果如表1所示。

表1 高频子图像能量值（+：高频能量增加，-：高频能量减少）

从表1中可知，烟雾和白色塑料袋相比，有烟雾背景图像的高频部分能量减少更加显著，有烟雾时背景的高频能量急剧减少，减少比例绝对值大于6%，所以本实验中的比例阈值Th设置为6%。

分别计算视频图像中连续两帧的烟雾图像和云朵图像其高频分量的相关系数，结果如表2所示。

表2 高频分量的相关系数

从表2可知，在连续两帧中烟雾和飘动的云在高频分量的相关系数上具有很大的差别。烟雾高频分量的相关系数一般小于0.5，云朵高频分量相关系数大于0.5，因此相关系数阈值th设置为0.5。

利用本文算法，在VS2010 C++实验平台上利用OPENCV库，对7个烟雾视频和3个非烟雾视频进行烟雾检测，检测结果如表3所示。

实验结果表明，该算法能够在有干扰物的情况下比较精确地识别火焰，提高了烟雾检测的可靠性，减少误报。

6 结论

对于基于高频的小波能量和相关性的烟雾检测算法的研究，应用了时间和空间的检测方法，与传统的烟雾检测算法（如颜色、形状、纹理）相比，提高了烟雾检测识别的可靠性。而且该算法可以很好地排除与烟雾具有相似特性的移动的云朵和飘动的白色物体。实验结果表明，基于高频部分的小波能量和相关性的烟雾检测可以较准确地从视频图像中识别出烟雾图像，并对障碍物进行有效的排除，减少误报，提高烟雾检测的可靠性。

表3 算法检测结果

[1]CALDERARA S，PICCININI P，CUCCHIARA R.Vision based smoke detection system using image energy and color information[J].Machine Vision and Applications，2011，22（4）：705-719.

[2]Lee Chenyu，Lin Chinteng，Hong Chaoting，et al.Smoke detection using spatial and temporal analyses[J].Computing， Information and Control，2012，8（6）：4726-4749.

[3]Li Wenhui，Fu Bo，Xiao Linchang，et al.A video smoke detection algorithm based on wavelet energy and optical flow eigen-values[J].Journal of Software，2013，8（1）：63-70.

[4]Sun Hong，Guo Kai.Moving target detection based on the improved Gaussian mixture background model[J].Jiangnan University Journal，2014，13（3）：269-274.

[5]Wei Wei，Wu Qi.Moving target detection based on three frame difference combined with improved gaussian modeling [J].Computer Engineering and Design，2014，35（3）：949-952. [6]Cheng Yuanhang，Wang Jing.A motion image detection method based on the inter-frame difference method[J].Applied Mechanics and Materials，2014，490（7）：1283-1286.

[7]Wang Tao，Liu Yuan，Xie Zhenpin.A new video smoke detection method based on wave analysis[J].Electronics and Information Journal，2011，33（5）：1024-1029.

Algorithm of smoke detection based on the frame of high frequency energy and correlation

Yang Ting1，2，Guan Hongyun1，2
（1.Information College，Donghua University，Shanghai 201620，China；2.The Ministry of Education of Textile Engineering Center，Shanghai 201620，China）

For the accuracy of the smoke detection，it is prone to miscarriage when the distractors and smoke are very similar. The smoke detection algorithm based on the frame of high frequency energy and correlation is studied.First，the Gaussian mixture background model and three frame difference method is used to extract the moving object，then the color of the smoke，diffusivity and shape is used to extract the suspected target area.The target area is processed with discrete wavelet transform to obtain the high frequency energy.The high frequency energy and correlation between frames are used to judge suspected area，to determine if the target is smoke and give alarm information or not.It is simulated on VS2010 and MATLAB.Simulation results show that the algorithm can improve the reliability of the smoke detection，and reduce false alarm.

target extraction；smoke detection；discrete wavelet transform；energy；correlation

TP391.9

A

1674-7720（2015）17-0032-04

阳婷，官洪运.基于帧间高频能量和相关性的烟雾检测算法研究[J].微型机与应用，2015，34（17）：32-35.

2015-04-01）

阳婷（1990-），女，硕士研究生，主要研究方向：信息与通信工程。

自组织社会网络的特征信息融合与决策支持方法研究（71171045）；校园火灾事故防范与应急处置关键技术研究与应用示范（11JG0500300）

官洪运（1960-），男，硕士，教授，主要研究方向：信息与通信工程。