彭 雄,钟新谷,赵 超,陈安华,张天予
〈红外应用〉
基于无人机热成像的建筑饰面层脱粘缺陷识别
彭 雄1,2,钟新谷1,2,赵 超1,2,陈安华1,张天予1,2
(1. 湖南科技大学,湖南 湘潭 411201;2. 结构抗风与振动控制湖南省重点实验室,湖南 湘潭 411201)
建筑外墙饰面层脱粘剥落广泛存在,对居民生命财产安全带来巨大威胁。本文以旋翼无人飞机为工作平台,搭载红外热成像相机对建筑外墙饰面层脱粘缺陷进行成像检测,获得脱粘缺陷热成像温度场分布规律;通过饰面层脱粘缺陷温度场、形状特征分析,提出基于热源聚类的脱粘缺陷红外图像分割方法,构建饰面层脱粘缺陷形状特征向量集,建立基于支持向量机的无人飞机热成像饰面层脱粘缺陷识别特征学习模型、脱粘缺陷实际面积计算方法;以曾出现数次饰面层剥落的教学楼为研究对象,对实际建筑进行无人机机载红外视频成像检测,识别脱粘缺陷面积,并与人工检测进行比较,表明基于先验特征规律提出的脱粘缺陷识别小样本机器学习算法具有优越性,机载热成像识别饰面层脱粘缺陷满足工程精度要求,能有效减少事故发生,具有可行性和广泛应用前景。
无人飞机;建筑饰面;脱粘缺陷;热成像;特征学习
饰面层(building decorative layers, BDLs)广泛应用于建筑外墙,但由于环境影响、施工质量等原因,饰面层容易发生脱粘剥落,且随着时间的推移,在雨水、冰冻、暴晒、强风等的作用下,脱粘面积会逐渐增大,最终导致饰面层从主体结构上剥离、脱落。近年来建筑外墙饰面层剥落事故时有发生,对居民生命财产安全带来巨大威胁,尤其对于高层建筑,一旦出现饰面层脱落将导致严重后果,迫切需要采取有效的检测手段来避免此类事故的发生。
传统饰面层脱粘缺陷检测手段主要有:目测法、锤击法、拉拔法[1-2],需要搭设支架依靠人工攀爬检测,时间长、成本高且检测人员安全存在风险,因此采用传统人工检测的方法识别饰面层脱粘缺陷无实际意义。近年来基于固定或手持红外热成像设备对外墙饰面砖脱粘缺陷检测相关研究发展迅速[3-4],相关学者研究了饰面层脱粘缺陷的温度场分布规律,并利用红外设备对外墙饰面层模型进行热成像,识别缺陷面积。但由于红外热成像与可见光成像相比具有成像范围较小、分辨率低的特点[5],固定或手持红外热成像设备对外墙饰面砖脱粘缺陷检测尚没有得到广泛应用。
近年来,旋翼无人飞机在航空拍照、测量、高压输电线路巡视、农业等民用领域得到广泛应用[6-10]。在无人飞机搭载红外热像仪进行结构检测方面,Omar利用无人机机载红外热像仪检查混凝土桥面脱空[11]。Patel基于无人飞机红外热成像测量了建筑围护构件的传热系数[12]。Ellenberg使用无人机分别搭载红外相机、普通相机对地面预制梁进行检测,分析混凝土结构表面缺陷特征[13]。Dusik Kim利用无人飞机携带红外热像仪对光伏电站的太阳能面板进行检测,应用阈值分割和形态学算法提出太阳面板的面积自动提取算法,识别的正确率达到96.9%[14]。但由于饰面脱粘缺陷为隐蔽缺陷,其热成像温度场受太阳辐射角度影响随时间变化。此外,不同颜色、规格的脱粘缺陷温度场规律可能不一致。因此基于无人飞机平台进行饰面层脱粘缺陷热成像检测还需进一步研究。
同时,由于红外热成像像素分辨率低,边缘模糊,使得基于传统图像处理方法难以识别红外热成像缺陷面积。近年来机器学习、深度学习技术发展迅速[15-16],适于大规模的机载热成像图像识别。Olivier利用卷积神经网络识别红外图像自动确定机器的状态[17]。Gong将深度学习方法用于基于热成像的电气设备检测[18]。Zhang结合压缩感知与分类卷积神经网络,提出超分辨率红外图像处理方法[19]。Luo建立了适于红外热成像缺陷检测的VGG-Unet网络[20]。Saeed提出了一种基于卷积神经网络和迁移学习的缺陷自动检测方法[21]。但无人飞机热成像的脱粘缺陷识别基于检测飞行试验建立小规模样本集,且基于文献及试验已得到缺陷热成像先验规律,利用深度学习卷积神经网络获得高阶特征进行红外图像语义分割的方法人工标记时间成本高,且特征冗余,造成识别精度和鲁棒性较低。
因此,本文以六旋翼无人飞机为工作台搭载红外热成像仪,在无人飞机加装三点激光测距仪与热像仪视频同步测距[22-23],基于无人飞机热成像试验获得饰面层脱粘缺陷热成像敏感性规律;基于饰面层脱粘缺陷红外图像特点,提出热源模糊聚类二值分割方法,和适于小样本的机器学习算法,并与开源深度学习语义分割效果比较;基于空间分辨率换算识别缺陷面积,并与传统人工检测进行比较,验证本文所提出方法的精度,系统架构如图1所示。
图1 系统架构图
近年来,有关学者研究了基于热成像的饰面脱粘缺陷识别,但受拍摄仰角、分辨率的限制难以进行大规模实际应用[1-4]。旋翼无人飞机具有使用灵活的特点,以旋翼无人机为平台,搭载红外热成像仪是否满足饰面层脱粘缺陷识别要求,取决于机载热成像对于温度变化下饰面层缺陷的敏感程度,以及不同规格饰面层的脱粘缺陷热成像温度场特性是否具有一致性。为满足建筑饰面层脱粘缺陷智能识别要求,利用无人飞机机载热成像对基于人工检测的脱粘缺陷进行检测,研究脱粘缺陷热成像温度特性,为基于机器学习图像处理的饰面层脱粘缺陷识别提供先验特征。
文献[1-4]研究了建筑饰面层的热传递规律,如图2所示为建筑物外墙饰面层的能量辐射示意图,当饰面层与建筑外墙之间发生剥离、脱空时,在脱空位置将形成很薄的空气层,由于气体具有很好的隔热性,使得饰面层与建筑结构之间的热传递减少。升温时,在太阳照射下墙体的温度迅速升高并向建筑内部传导热量,由于脱粘缺陷位置有空气层的存在热量向内传递相应减少,导致脱粘缺陷表面的温度异常高于正常位置;降温时,由于脱粘缺陷阻挡了建筑内部的热量向表面传递,使缺陷表面的温度异常低于正常位置。利用饰面层脱粘缺陷的热传递规律,脱粘缺陷处的红外热成像图像与正常位置应具有明显差异,为识别饰面层脱粘缺陷位置与面积提供了实验与理论依据。
图2 太阳辐射下饰面层脱粘缺陷热传递原理
根据建筑饰面层的热传递规律,利用如图3所示六旋翼无人飞机平台,搭载DY640红外热成像仪(温度分辨率0.04℃,热灵敏度0.035℃,图像分辨率640×480,帧率25帧)和三点激光测距仪,对人工检测的脱粘缺陷位置进行成像检测。将机载红外热成像视频逐帧解压,对缺陷区域红外热成像照片按典型时段排列,并计算其灰度分布图,如图4所示。表明在8:00 am~14:00 pm的升温过程中,脱粘缺陷的灰度范围与正常背景之间存在明显的差异,显著高于背景,其中在10:00 am左右由于剧烈升温导致图像灰度差异最为明显,脱粘缺陷区域灰度差异值在40以上。在降温过程中,脱粘缺陷处灰度值低于正常背景,在16:00 pm左右差异最为明显。试验结果与建筑外墙饰面层能量传递规律一致,且升温时热成像图像灰度特征变化更为明显,表明利用快速升温时缺陷区域机载热成像结果的显著灰度差异识别饰面层缺陷具有可行性。
图3 饰面层缺陷机载热成像检测:(a) 机载热成像测试原理;(b) 机载热成像测试结果
图4 饰面层脱粘缺陷温度场时间变化规律
利用前述无人飞机系统,在升温最剧烈的时间段对多座曾出现过饰面层剥落的大楼进行机载红外热成像实验,选取同一规格饰面建筑的不同面积脱粘缺陷热成像图像进行对比,如图5所示,表明不同面积的脱粘缺陷区域温度场都有中心向边缘的灰度梯度变化,具有普遍一致性,利用机载热像仪无差别视频录像识别不同面积饰面层缺陷具有可行性。
如图6所示,对比不同规格饰面层的缺陷热成像图像,表明脱粘缺陷温度场变化与饰面种类、颜色、规格无关,缺陷温度场特性具有普遍一致性,饰面层脱粘缺陷热成像图像边缘模糊、由中心向边缘温度梯度变化明显、区域形状特征与其他干扰噪声有明显区别,表明通过建立饰面缺陷图像数据集,利用无人飞机机载热成像视频无差别检测飞行,利用机器学习方法快速识别缺陷病害具有可行性。
图5 不同面积饰面层脱粘缺陷热成像灰度分布规律
图6 不同规格饰面层脱粘缺陷热成像灰度分布规律
基于前述试验分析,表明设定无人飞机航迹进行无差别机载红外视频成像识别饰面层脱粘缺陷具有可行性,但由于视频成像数据量巨大,同时在饰面层热成像图像中,饰面砖勾缝、金属窗、空调外机等物体大量存在,其比热容小升温迅速,与脱粘缺陷的温度场具有类似的特点,引起脱粘缺陷的误识别,因此如何利用图像处理技术快速准确识别脱粘缺陷面积尤为重要。基于前述特点,本文提出基于热源模糊聚类的二值分割方法,和基于支持向量机的缺陷形状自动筛选机器学习算法,自动提取并识别饰面层脱粘缺陷面积。
为准确识别饰面层脱粘缺陷面积,需对缺陷图像区域内每一像素点进行分类判断,实现语义分割[24]。而聚类是把某些具有相同特征的样本数据聚集在一起,从而实现对样本数据进行分类。基于热源模糊聚类的红外图像分割使用迭代搜索聚类中心即热成像图像中热源中心,并通过区域内像素与中心之间的隶属度关系来计算目标函数的最小值,实现红外图像模糊边界的分离和缺陷区域图像的像素级分割[25]。算法的目标函数如式(1)所示:
式中:是像素数目;表示聚类中心数;表示相对于类的隶属度;表示模糊权重系数;表示像素灰度;表示聚类中心。隶属度的约束条件为:
因此求解聚类问题变成了一个非线性优化,求解在约束公式(2)下的目标函数最小值,通过引入拉格朗日乘子,将方程变成如下:
基于升温时段饰面脱粘缺陷和噪声都具有异常高的温度场特性,利用上述模糊聚类算法进行热成像图像分割,其步骤的如下:①将图7(a)所示原始图片进行灰度化,并计算其灰度直方图,如图7(c)所示;②根据灰度直方图确定聚类类别数为2类;③计算目标函数。如果目标函数比某确定阈值小,或相对于某阈值e大于上次目标函数值的改变量,则算法停止;④用公式(2)计算新的模糊矩阵U,然后返回步骤③。从而确定各类聚类的中心和各个样本数据属于各类的隶属度矩阵,完成聚类分割,如图7(d)所示。
经过模糊聚类分割后,红外图像中窗户、空调外机、勾缝等具有集中温度场特性的噪声与饰面缺陷同时被聚类出来。为实现小样本数据集下的脱粘缺陷面积精确识别,基于脱粘缺陷区域形状特征参数构造向量集,训练基于支持向量机的脱粘缺陷面积识别模型。
2.2.1 形状特征向量集构造
为快速区分二值图像内脱粘缺陷与其他噪声,如图7所示,利用区域提取函数对分割后区域进行标记。根据文献,计算图7标记区域内等主要形状指标面积、最小外接矩形长宽比、矩形度、圆形度、周长、伸长度、偏心率,结果表1所示,缺陷与噪声区域形状特征有明显区别,表明利用形状参数筛选缺陷区域具有可行性[26]。随机选取20张含不同像素面积的脱粘缺陷图像,统计其形状特征参数值,并进行归一化处理,建立筛选曲线,以形状特征面积和区域圆度为例,如图8和图9所示,其中缺陷区域像素面积与噪声像素面积范围互相重合,无法对缺陷区域和噪声进行筛选,而区域圆度则能有效区分缺陷与噪声区域。统计上述区域形状特征指标对样本区域的筛选率,选取筛选率高的圆度、最小外接矩形长宽比、偏心率、矩形度作为脱粘缺陷区域特征向量。构建=(,,,)的缺陷形状特征向量。
2.2.2 支持向量机算法构建
支持向量机(support vector machines, SVM)是基于结构风险最小化的一种机器学习算法,具有泛化能力强、适用于小样本分类等优点[27]。而基于机载热成像的饰面层脱粘缺陷区域识别样本数据集制作的时间成本较高,因此本文利用支持向量机算法,建立小样本饰面缺陷识别数据集,训练脱粘缺陷自动识别模型。选取具有强学习能力、适应范围宽的径向基(radial basis function, RBF)核函数作为支持向量机的核函数。该核函数为:
表1 脱粘缺陷区域形状特征参数计算
图9 基于面积参数的筛选结果
对应参数寻优的二次规划问题转化为以下的最大值问题:
相应的最优函数为:
SVM即为构造最优分割平面,将基于筛选的脱粘缺陷区域形状特征向量映射到高维空间,实现基于最优分割平面的缺陷区域与噪声区域分类,实现脱粘缺陷区域与非缺陷区域的自动筛选滤除。
2.2.3 模型训练与验证
选取200张经过聚类分割后的脱粘缺陷红外图像进行区域标记。随机选取像素面积不同的个区域作为样本集(,),其中=1, 2, 3,…,,取=200为样本数。为脱粘缺陷红外图像的特征向量,为缺陷特征向量的人工标记。标记图像的大小为640pixel×480pixel,按照“训练集:验证集=4:1”的比例,将图像样本数据集分成训练集和验证集,训练集图像数量为160张,验证集图像数量为40张。利用Python编写程序完成样本训练,将学习模型对验证集进行交叉验证,测试结果显示39个验证集样本实现了正确分类,正确率为97.5%。
为验证本文所提出系统方法的有效性,进行无人飞机建筑饰面层脱粘缺陷热成像试验,试验以作者单位某五层教学楼为依托工程,该教学楼于2005建成,其采用20cm×8cm规格瓷砖作为外墙饰面,近年来出现多次饰面层脱落事件。选择出现剥落较多的东立面、南立面作为检测飞行对象,在夏季升温最快的上午10:00左右进行机载热成像试验,成像设备为六旋翼无人飞机平台,搭载DY640红外热成像仪(温度分辨率0.04℃,热灵敏度0.035℃,图像分辨率640×480,帧率25帧),配备与热像仪同频率三点激光测距仪,及高清图传系统,如图10所示,飞行检测过程如图11所示。
机载红外摄像具有检测速度快、检测范围全覆盖的优点,只需在低速平稳状态下进行无差别扫描摄像。饰面层的脱粘缺陷识别要求对建筑物外墙立面进行快速、全覆盖检测,因此选择机载红外摄像作为成像方式。在试验飞行过程中,利用三点激光测距仪实时测量并记录无人飞机系统与建筑外墙之间物距,为保证机载红外摄像具有足够的分辨率,经过现场反复飞行检测验证,设定检测飞行物距为4~6m。根据文献[21-22],在6m物距下像素解析度计算如式(7)所示:
图11 无人飞机飞行检测过程
式中:uav是待求的无人飞机飞行速度;pixel为保证视频清晰的最小像移;为保证视频清晰的最小像素数;为像素解析度;为视频中单帧拍摄时间。根据(7)、(8)式计算,设定飞行物距4~6m,飞行速度0.7m/s。对获取的红外视频进行解压,得到饰面层缺陷红外热成像图像如图12所示,对图12进行人工分割识别如图13所示。
对于无人飞机机载热成像的饰面层脱粘缺陷图12按前述方法进行聚类分割,将红外图像中的热源中心及其附近区域聚类,结果如图14所示。聚类分割后的图像上存在窗、空调外机、饰面勾缝等比热容较低的物体区域。将图14所示二值图像进行区域标记,将形成的区域特征向量代入前述训练好的支持向量机模型,消除非缺陷区域,并重新进行区域标记得图15所示缺陷区域图像。结果显示所提出的识别方法具有更好的分割效果,对金属窗户、勾缝等伪特征噪声有较强的抑制能力,对边缘的分割效果也更接近如图13所示的饰面脱粘缺陷人工分割图像。
图12 机载热成像饰面脱粘缺陷图
图13 饰面脱粘缺陷手动分割图
图14 聚类分割结果
为了评估所提出热源模糊聚类二值分割和支持向量机筛选预测模型的精确性,采用交互比进行模型评估,其计算方法如式(9)[29]:
式中:TP是被模型预测为正的正样本;FP是被模型预测为正的负样本;FN是被模型预测为负的正样本。计算图15所示分割结果对比人工分割样本的IoU值,对比图16采用开源Deeplab V3+深度学习语义分割网络[30]所分割图像,本文算法的IoU值平均在0.9以上,分割的精度优于训练好的语义分割模型。表明利用饰面层脱粘温度场变化先验特征、基于支持向量机建立筛选分类模型,在小样本数据集中对比开源深度学习网络更具有优越性和可解释性,对于对比度较低、边缘模糊、且有伪特征干扰的脱粘缺陷红外图像具有更好的分割精度。
图16 基于Deeplab V3+的语义分割结果
图12所示机载热成像饰面缺陷同步激光测距如表2所示,对于图15中提取的缺陷形状,通过工具箱分别统计各脱粘缺陷区域内总像素数,根据文献[21-22],利用物距法计算单个像素对应的实际面积,最后得到脱粘缺陷区域总的实际面积,计算结果如表2所示。
对比基于传统人工敲击检测脱粘缺陷区域面积,如表2所示,基于无人飞机热成像的建筑饰面脱粘缺陷识别结果,与人工检测数据相比所得结果相差较小,机载热成像系统达到90%以上精度,表明基于无人飞机热成像饰面层脱粘缺陷识别具有可行性。
表2 机载热成像饰面缺陷面积识别与比对
①通过无人飞机饰面层脱粘缺陷热成像敏感性试验,得到饰面层脱粘缺陷温度场随时间变化规律;比较在最佳检测时间内不同饰面层热成像试验结果,表明不同面积和不同饰面规格的脱粘缺陷热成像灰度分布具有一致性,利用无人飞机机载红外无差别扫描录像识别脱粘缺陷位置与面积大小具有可行性。
②本文提出了一种结合聚类和机器学习的小样本脱粘缺陷面积识别方法。基于红外图像边缘模糊、灰度梯度明显、脱粘缺陷区域形状与其他干扰噪声有明显区别的特点,提出热源模糊聚类二值分割方法,并基于支持向量机建立缺陷形状自动筛选模型,达到90%以上面积识别精度。表明利用温度场特性和形状参数先验特征,在小样本数据集上对比开源深度学习网络更具有优越性和可解释性,具有更好的分割精度。利用无人飞机机载红外热成像系统可有效识别饰面层脱粘缺陷,为后续的维修和预警提供了有效检测数据,具有良好的社会和工程应用价值。
③根据本文试验及分析结果,建议无人飞机机载热成像检测时段应该选择在夏季、秋季的温度迅速升高时段。
④本文对饰面层脱粘缺陷的识别为事后分析,制作专门分析软件内置入机载热成像系统进行实时检测还需要进一步研究。
[1] 冯力强, 王欢祥, 晏大伟, 等. 建筑外墙饰面层内部缺陷红外热像法检测试验研究[J]. 土木建筑与环境工程, 2014, 36(2): 57-61
FENG Liqiang, WANG Huanxiang, YAN Dawei, et al. Experimental study on inside defects of building exterior wall decoration layer by infrared thermal imaging method[J]., 2014, 36(2): 57-61.
[2] 朱红光, 易成, 胡玉琨, 等. 红外热像诊断外墙饰面层粘结缺陷的检测条件研究[J]. 建筑技术, 2016, 47(2): 172-175.
ZHU Hongguang, YI Cheng, HU Yukun, et al. Study on detection conditions for infrared thermography diagnosis of debonding defect of exterior wall decoration layer[J]., 2016, 47(2): 172-175.
[3] 朱雷, 房志明, 王卓琳, 等. 外墙饰面层粘结缺陷的检测评估[J]. 无损检测, 2016, 38(6): 10-16.
ZHU Lei, FANG Zhiming, WANG Zhuolin, et al. Detection and evaluation of debonding defect of exterior wall decoration layer[J]., 2016, 38(6): 10-16.
[4] 冯力强, 王欢祥, 晏大玮, 等. 红外热像法检测建筑外墙饰面层内部缺陷试验研究[J]. 土木工程学报, 2014, 47(6): 51-56.
FENG Liqiang, WANG Huanxiang, YAN Dawei, et al. Experimental study on internal defects detection of exterior wall finish coat by infrared thermography[J]., 2014, 47(6): 51-56.
[5] Gene S, Hojjat A. Infrared thermography for detecting defects in concrete structures[J]., 2018, 24: 508-515.
[6] WANG L, ZHANG Z. Automatic detection of wind turbine blade surface cracks based on UAV-taken images[J]., 2017, 64(9): 7293-7303.
[7] CHEN S, Laefer D F, Mangina E, et al. UAV bridge inspection through evaluated 3D reconstructions[J]., 2019, 24(4): 05019001.
[8] CHEN S, Laefer D F, Mangina E. State of technology review of civilian UAVs[J].2016, 10(3): 160-174.
[9] Rakha T, Gorodetsky A. Review of unmanned aerial system (UAS) applications in the built environment: towards automated building inspection procedures using drones[J]., 2018, 93: 252-264.
[10] Sattar D, Thomas R J, Marc M. Fatigue Crack Detection using unmanned aerial systems in fracture critical inspection of steel bridges[J]., 2018, 23(10): 04018078.
[11] Tarek O, Nehdi M L. Remote sensing of concrete bridge decks using unmanned aerial vehicle infrared thermography[J]., 2017, 83: 360-371.
[12] Patel D, Estevam Schmiedt J, Röger M, et al. Approach for external measurements of the heat transfer coefficient (U-value) of building envelope components using UAV based infrared thermography [C]//14, 2018: 379-386.
[13] A Ellenberg,A Kontsos, F Moon, I Bartoli. Bridge deck delamination identification from unmanned aerial vehicle infrared thermography, automation in construction[J]., 2016, 72: 155-165
[14] Dusik K, Youn J. Automatic photovoltaic panel area extraction from UAV thermal infrared images[J]., 2016, 34(6): 559-568.
[15] 勾红叶, 杨彪, 华辉, 等. 桥梁信息化及智能桥梁2019年度研究进展[J]. 土木与环境工程学报, 2020, 42(5): 14-27.
GOU Hongye, YANG Biao, HUA Hui, et al. Research progress of bridge informatization and intelligent bridge in 2019[J]., 2020, 42(5): 14-27.
[16] 鲍跃全, 李惠. 人工智能时代的土木工程[J]. 土木工程学报, 2019, 52(5): 5-15.
BAO Yuequan, LI Hui. Artificial intelligence for civil engineering[J]., 2019, 52(5): 5-15.
[17] Janssens O, Walle R V D, Loccufier M. Deep learning for infrared thermal image based machine health monitoring[J]., 2018, 23(1): 151-159.
[18] GONG X, YAO Q, WANG M, et al. A deep learning approach for oriented electrical equipment detection in thermal images[J]., 2018(6): 41590-41597.
[19] ZHANG X, LI C, MENG Q, et al. Infrared image super resolution by combining compressive sensing and deep learning[J]., 2018, 18(8): 2587.
[20] LUO Q, GAO B, Woo W L, et al. Temporal and spatial deep learning network for infrared thermal defect detection[J]., 2019, 108: 102164.
[21] N Saeed, N King, Z Said, et al. Automatic defects detection in CFRP thermograms, using convolutional neural networks and transfer learning[J]., 2019, 102: 03048.
[22] 钟新谷, 彭雄, 沈明燕. 基于无人飞机成像的桥梁裂缝宽度识别可行性研究[J]. 土木工程学报, 2019, 52(4): 52-61.
ZHONG Xingu, PENG Xiong, SHEN Mingyan. Study on the feasibility of identifying bridge crack width with images acquired by unmanned aerial vehicles[J]., 2019, 52(4): 52-61.
[23] 钟新谷, 彭雄. 基于无人飞机机载成像的混凝土裂缝宽度识别方法: 0845685.9, 中国[P]. 2019-02-19.
ZHONG Xingu, PENG Xiong. Concrete-crack-width identification system and method based on robot bomb airborne imaging:0845685.9 China[P].2019-02-19
[24] CHEN L C, Papandreou G, Kokkinos I, et al. Semantic image segmentation with deep convolutional nets and fully connected CRFs[J]., 2014(4): 357-361.
[25] 王晓飞, 胡凡奎, 黄硕. 基于分布信息直觉模糊c均值聚类的红外图像分割算法[J]. 通信学报, 2020, 41(5): 120-129.
WANG Xiaofei, HU Fankui, HUANG Shuo, Infrared image segmentation algorithm based on distribution information intuitionistic fuzzy c-means clustering[J]., 2020, 41(5): 120-129.
[26] 李可心, 王钧, 戚大伟. 基于G-S-G的混凝土结构裂缝识别及监测方法[J]. 振动与冲击, 2020, 39(11): 101-108.
LI Kexin, WANG Jun, QI Dawei. Research on crack identification and monitoring method of concrete structure based on G-S-G[J]., 2020, 39(11): 101-108.
[27] 王睿, 漆泰岳. 基于机器视觉检测的裂缝特征研究[J]. 土木工程学报, 2016, 49(7): 123-128
WANG Rui, QI Taiyue. Study on crack characteristics based on machine vision detection[J]., 2016, 49(7): 123-128 .
[28] HWANG Soonkyu, AN Yun Kyu, KIM Ji Min, et al. Monitoring and instantaneous evaluation of fatigue crack using integrated passive and active laser thermography[J]., 2019, 119: 9-17.
[29] Kang D, Benipal S S, Gopal D L, et al. Hybrid pixel-level concrete crack segmentation and quantification across complex backgrounds using deep learning[J]., 2020, 118: 103291.
[30] CHEN L C, Papandreou G, Kokkinos I, et al. DeepLab: semantic image segmentation with deep convolutional nets, atrous convolution, and fully connected CRFs[J]., 2016, 40(4): 834-848.
Debonding Defect Recognition of Building Decoration Layers by UAV Thermography
PENG Xiong1,2,ZHONG Xingu1,2,ZHAO Chao1,2,CHEN Anhua1,ZHANG Tianyu1,2
(1.,411201,; 2.,411201,)
The phenomenon of building decorative layers (BDLs) falling off of exterior walls is quite common, and is of great concerns to human safety. In this study, a rotor unmanned aerial vehicle (UAV) equipped with an infrared thermal camera is used as the working platform to detect debonding BDL defects to obtain the change in law of its thermography imagery. Based on the analysis of the temperature field and shape characteristics of thermography images of BDLs, an image segmentation method for debonding defects based on fuzzy clustering is proposed, and a shape feature vector set of debonding BDL defects is constructed. Therefore, a feature learning model for debonding defect recognition and a calculation method for the actual area of debonding defects based on support vector machines are established. Finally, a case study of the teaching building inspection with several peeling veneers is carried out to demonstrate the effectiveness of the proposed method. Compared with the manual test, the results show that the small-sample machine-learning algorithm for debonding defect recognition based on prior feature law has advantages, and can effectively reduce the occurrence of accidents presenting potential practical applications.
unmanned aerial vehicle, building decoration layers, debonding defect, thermography imagery, feature learning
TU17
A
1001-8891(2022)02-0189-09
2020-11-02;
2021-04-23.
彭雄(1992-),男,博士研究生,主要从事结构健康监测技术与方法研究。E-mail:1021009@hnust.edu.cn。
钟新谷(1962-),男,博士,教授,主要从事结构工程科研与教学工作。
国家自然科学基金(基于无人飞机的桥梁结构裂缝形状与宽度非接触识别研究51678235)。