焊接机器人焊缝跟踪方法及路径规划研究

曹学鹏，脱帅华,，张 弓，吴月玉，张雨航,，樊 豪，赵睿英，冯艳丽

(1.长安大学 工程机械学院 机电液一体化研究所，陕西 西安 710064；2.广州先进技术研究所，广东 广州 511458；3.西安航天时代精密机电有限公司，陕西 西安 710100)

焊接机器人因其高效性在先进制造业中应用广泛，焊缝跟踪技术具有非接触、速度快、精度高等优点，是实现焊接自动化与智能化的关键。目前，大多数焊接机器人仍采用“示教-再现”的工作方式，难以满足焊接对象或其他条件改变时的要求。

基于激光视觉的焊缝跟踪结合了激光测量与计算机视觉技术，具有获取信息丰富、焊缝特征明显、抗干扰能力强等优点，适用于实时跟踪系统。邹焱飚等通过设计传感器的机械结构，推导出由激光特征点像素坐标转换到焊缝特征点3维坐标的数学模型；Chen等提出一种只需两次轮廓扫描的特征点定位方法，可有效计算出焊缝的初始位置；Chang和Lei等对焊缝轮廓数据进行滤波、求导及卷积处理后，通过寻找局部最值来定位特征点；Wang和He等分别提出基于NURBS-Snake与视觉注意模型的焊缝轮廓检测与特征点提取算法，并验证了其有效性；Hou等将传统图像处理方法与扩展Kalman滤波算法相结合提取焊缝特征点。以上方法可实现对目标焊件特征点的提取，但在定位精度上会因焊缝类型改变或焊件表面缺陷等因素而存在一定局限性。

作者提出焊缝跟踪的4步法：首先，利用激光传感器扫描焊件坡口采集轮廓数据；接着，通过组合滤波算法处理数据以平滑噪声；然后，在2阶导数法初步定位特征点的基础上，通过线性拟合对特征点精确定位；最后，根据传感器位姿标定的结果，由图像特征点的2维坐标计算出机器人基坐标系下的3维坐标，完成路径规划，并针对Y型坡口的直线与曲线焊缝进行跟踪方法的实验验证。

1 焊缝跟踪方法

焊缝跟踪系统主要由焊接机器人及其控制器、激光传感器、工控机等组成，如图1所示。该系统通过焊件扫描、数据滤波、特征点定位与焊接路径规划等4步实现焊缝跟踪。

激光传感器搭载于机器人末端，通过扫描焊件采集焊缝坡口的轮廓信息。将获取的信息传输给工控机进行滤波以平滑噪声，将2阶导数法与线性拟合相结合来定位焊缝特征点的坐标。通过标定传感器将特征点转换到焊枪坐标系下，转换机器人的运行轨迹，以位姿信号的形式发送给机器人控制柜。控制柜通过驱动机器人移动来引导焊枪运动，实现焊缝的实时跟踪。焊缝跟踪4步法的工作流程如图2所示。

图 1 焊缝跟踪系统Fig. 1 Seam tracking system

图2 焊缝跟踪4步法的工作流程Fig. 2 Process of four-step seam tracking method

1.1 焊件扫描与数据滤波

扫描的目的是获取焊件坡口轮廓的原始数据，这是实现焊缝跟踪的基础。激光传感器基于三角测量原理获得被测物的距离信息，通过处理扫描数据即可得到被测物的轮廓特征。

扫描时，激光传感器固定于机器人末端并与焊枪平行，以保证线激光垂直入射被测物，最大程度地覆盖坡口，同时不断移动机器人，获得焊缝的整体形貌特征。

采用限幅滤波与高斯滤波相结合的方式处理所得的坡口轮廓数据，前者用于去除因偶然因素引起的脉冲干扰，后者用于平滑数据。限幅滤波通过比较相邻两次采样值之差的绝对值与阈值的大小来筛选数据，其原理如式（1）所示：

式中，

y

与

y

分别为本次与上次采样信号值，Δ

T

为指定阈值。

高斯滤波是一类根据高斯函数的形状来选择权值的线性平滑滤波方式，对于抑制服从正态分布的噪声非常有效，且高斯函数具有对称、可微和可积的良好性质，能够准确识别信号的间断点，这对于后续的特征点提取十分有利，1维高斯函数的表达式如下：

式中：µ为均值，决定函数的位置；σ为标准差，决定分布的幅度。

为了检验限幅滤波与高斯滤波对坡口轮廓数据滤波的适应性和有效性，对Ⅰ型坡口剖面的数据求1阶导数并进行限幅滤波，如图3所示。

图3 对Ⅰ型坡口剖面数据1阶导数的限幅滤波Fig. 3 Limiting filtering of the first derivative of Ⅰ-type groove profile data

从图3（a）可以看出，在1阶导数极值点附近，数据点比较稀疏，而且原始数据中存在干扰点。由图3（b）可见：限幅滤波后，原始数据中的干扰点得到有效去除；同时，数据的分布更加均匀。对Ⅰ型坡口的剖面数据进行高斯滤波，结果如图4所示。

图4 对Ⅰ型坡口剖面数据的高斯滤波Fig. 4 Gaussian filtering of profile data of Ⅰ-type groove

图4（a）中，两个相邻的幅度突变点间数据点较少，不利于后续的差分运算。由图4（b）可知，经高斯滤波后，原始数据的各个部分都获得了很好的平滑效果。

1.2 特征点提取

1.2.1 特征点定义

焊件的特征点一般是坡口截面的角点，其包含的信息能反映坡口轮廓的整体情况，故需进行特征点提取。表1展示了连续函数在间断点处的性质，是坡口特征点定义的依据。

表1 函数间断点分类及其性质
Tab. 1 Classification and properties of function discontinuities

间断点类别函数在间断点处的性质函数值 1阶导数 2阶导数第1类 连续 阶跃突变 极值第2类 阶跃突变 极值 不存在

根据2阶导数存在与否将特征点分为两类：2阶导数存在的特征点称为第1类特征点，否则称为第2类特征点。图5描述了坡口特征点的分类，图5中，

A

、

B

、

E

、

F

为第1类特征点，

C

、

D

为第2类特征点。

图5 坡口特征点的分类Fig. 5 Classification of groove feature points

因大多数坡口的截面一般为规则的几何图形，特征点多为第1类与第2类的组合，故可基于前述定义来确定坡口所包含的特征点类型，进而对其定位。

1.2.2 特征点定位

因Y型坡口同时包含第1、第2类特征点，具有代表性，故以此为例阐述特征点定位方法，其流程如图6所示。

图6 特征点的定位流程Fig. 6 Positioning process of feature points

1）初步定位

先对原始数据进行限幅滤波，而后对其向前差分求1阶导数并寻找极值点，再通过高斯滤波平滑数据，确定第1类特征点。

2）精确定位

因机械加工使焊件表面存在缺陷，初步定位得到的特征点不准确。图7为焊件表面缺陷示意图，从图7中可以看出，左边坡口存在一处缺陷，经初步定位得到特征点为

b

、

c

两点，而真实的点为

a

点。显然两者间存在一定偏差，因此，需在初步定位的基础上，采用符合坡口特点的方法进行精确定位。

图7 焊件表面缺陷示意图Fig. 7 Defects on the surface of the weldment

分析焊件坡口形状知，其截面轮廓由多条线段组成，特征点为各线段的交点。缺陷部分在整个坡口表面占比较小，即传感器采集的轮廓数据中，大部分是直线段数据，少量为缺陷部分的数据，这一特点符合线性拟合的条件。

因此，以初步定位所得的特征点为分界点，将坡口轮廓的数据分段并对每段分别进行线性拟合，求得各拟合直线的交点来精确定位特征点。

设任一待拟合的直线方程为

y

=

ax

+

b

，拟合方程参数的计算如式（3）所示：

式中，

a

为斜率，

b

为截距，(

x

，

y

)为经过该直线的点，

n

为点的个数。

1.3 焊接路径规划

在定位出坡口的特征点后，将所得数据转换到焊枪坐标系下，为焊缝跟踪的实现奠定基础。

1.3.1 标定激光传感器

机器人各坐标系间的关系如图8所示，通过传感器的位姿标定将其测量所得特征点转换至基坐标系下。

图8 各坐标系间的关系Fig. 8 Relationships between the coordinate systems

本文采用多点法进行传感器位姿标定，如图9所示。

图9 传感器的标定Fig. 9 Calibration of sensors

图9中，{

S

}为传感器坐标系，{

B

}为基坐标系，

P

是点

P

在基坐标系下的坐标值，

P

是点

P

在传感器坐标系下的坐标值。传感器位姿标定的目的，是确定传感器坐标系{

S

}相对于末端坐标系{

E

}的变换矩阵

T

。

T

的计算步骤如下：1）选取焊件上某点

P

，使焊枪末端触碰该点，记录

P

在{

B

}下的位置

P

=(

x

，

y

，

z

，1)，如图9（a）所示。2）移动机器人，使传感器的激光线经过该点，记录

P

在{

S

}下的位置

P

=(

x

，0

z

，1)，如图9（b）所示。3）切换机器人当前的工具坐标系为{

E

}，记录此时{

E

}的位姿数据，由欧拉旋转公式求得旋转矩阵

R

，如式（4）所示：

式中：

R

为旋转矩阵，用以描述{

E

}相对于{

B

}的方位；

r

为

R

的元素，α、β、γ分别为机器人末端坐标系{

E

}的

X

、

Y

及

Z

轴转动的角度。进一步求得

T

，如式（5）所示：

式中，

P

=(

x

，

y

，

z

)，即切换坐标系后的

P

点在{

E

}下的位置。4）根据

P

点在空间中的变换关系有：

式中，各参数的定义与上文所述一致。

因

T

包含12个未知数，需选取最少3个不同的固定点进行求解，本文的标定结果如下：

至此，完成传感器的位姿标定，对于其坐标系下的任一已知点

Q

，将其变换到机器人基坐标系下的公式为：

式中，

Q

、

Q

为点

Q

在{

B

}与{

S

}的位置坐标，

T

为式（7）的计算结果，

T

为式（5）的计算结果。

1.3.2 确定焊接路径中间点

焊接路径规划的实质是确定焊枪中心点TCP在运动中的一系列中间位置。因此，需根据特征点坐标确定焊枪中心点的位置。

记TCP坐标为

P

=[

x

,0,

z

,1]，以Y型坡口为例建立焊枪中心点的数学模型，如图10所示。图10中，

A

至

F

各点为Y型坡口的特征点，TCP代表焊枪的中心点，横纵坐标分别为激光传感器坐标系的

X

、

Z

轴。

图10 焊枪中心点坐标的数学模型Fig. 10 Mathematical model of welding torch center point coordinate

由图10可知，坡口的钝边

h

可表示为，

z

-

z

或

zz

，取其均值得：

偏移量

f

为从焊丝到焊接对象的间距，具体取值参照《焊接工程师手册》，根据Y型坡口尺寸，取

f

=1.5 mm。经上述分析，可得焊枪中心点坐标的计算公式为：

式中，

x

、

x

、

x

、

x

分别为

A

、

B

、

E

、

F

4点的横坐标，

h

为钝边，

f

为偏移量。

将定位所得某一剖面的特征点坐标代入式（10）中，可得该剖面的焊枪中心点坐标。

传感器扫描焊件获得多组剖面数据，进行上述处理后得到多个TCP坐标。通过传感器与焊枪的标定矩阵，将TCP坐标由{

S

}转换至{

T

}下并依次连接，得到一系列焊接路径中间点的坐标，即构成焊枪的运动轨迹。

由焊枪中心点坐标计算焊接路径中间点坐标的公式为：

式中，

P

为焊枪中心点在传感器坐标系{

S

}下的坐标，

T

为激光传感器的位姿标定矩阵，

T

为焊枪位姿标定矩阵

T

的逆矩阵。

2 实验研究

选取两种典型焊缝为研究对象，焊件材质分别为Q235与铝，其实物与坡口参数分别如图11与表2所示。

表2 焊件坡口参数
Tab. 2 Groove parameters of weldment

坡口参数 尺寸/mm厚度/mm坡口角/(°)间隙/mm钝边/mm直线焊缝100×60 8 45 3 2.0曲线焊缝130×80 10 60 3 2.5

图11 两种典型焊缝Fig. 11 Two typical grooves

实验系统主要由IRB 1410焊接机器人、IRC5控制器、LS-100CN激光传感器和工控机组成，如图12所示。系统基于前文所述的焊缝跟踪4步法，经扫描、滤波、特征点提取与路径规划，引导焊枪移动。

图12 焊缝跟踪实验系统Fig. 12 Experiment system of welding seam tracking

2.1 特征点定位结果

初步定位结果如图13所示，横、纵坐标分别代表特征点在传感器坐标系的

X

、

Z

轴上的取值。由图13可知，1阶导数的最值点落在线段

BC

与

DE

间，未能与

B

、

E

准确对应，这是由于焊件坡口经加工后，其钝边并非理想状态的竖直线，而是一条斜线。可对1阶导数继续差分，求得2阶导数并寻找最值点，定位所有特征点，如图13（b）所示。至此，梯形坡口的6个特征点均已初步确定，其位置信息见表3。

表3 特征点的初步定位结果
Tab. 3 Results of feature point rough location

特征点 x/mm z/mm 特征点 x/mm z/mm A -6.37 -1.71 D 0.47 5.82 B -3.89 2.84 E 0.55 2.81 C -3.28 5.61 F 3.38 -1.40

图13 特征点初定位Fig. 13 Rough location of feature points

Y型坡口的线性拟合结果如图14所示。

图14 线性拟合结果Fig. 14 Linear fitting result

图14中，拟合直线段1～7的拟合参数如表4所示。表4中：和方差一项用来计算线性拟合的误差平方和，其值越小则效果越好；确定系数表征拟合的好坏，其值越接近1则效果越好。由表4易知，各直线拟合效果均较好。

表4 各直线的拟合参数
Tab. 4 Parameters of fitting straight line

拟合直线 斜率 截距 和方差 确定系数1 0.024 -1.247 0.079 0.846 2 1.843 9.173 0.444 0.996 3 10.740 38.630 0.388 0.953 4 0.001 5.984 0.149 0.867 5 -8.551 12.600 0.500 0.969 6 -1.657 5.041 0.154 0.999 7 0.022 -1.262 0.209 0.812

由直线两两相交可求得特征点精确定位的结果，具体见表5，至此完成对梯形坡口截面轮廓特征点的提取。

表5 特征点的精确定位结果
Tab. 5 Results of feature point precise positioning

特征点 x/mm z/mm 特征点 x/mm z/mm A 5.73 1.39 D 0.78 6.09 B -3.31 3.07 E 1.10 3.22 C 3.04 5.98 F 3.76 -1.18

对比表3与表5可知，精确定位前后所得特征点坐标存在一定偏差，主要是焊件表面缺陷与传感器的温度漂移属性共同影响所致。因此，在对特征点初步定位的基础上，可通过线性拟合实现精确定位。

2.2 路径规划结果

选取25组传感器扫描的剖面数据，计算得到焊接路径中间点。采用多项式、高斯及3次样条插值等3种方法分别规划焊接路径，拟合结果如图15所示。

图15 采用3种方法的焊接路径规划结果Fig. 15 Welding path planning results using three methods

最小二乘法突出强调数据点的整体趋势，对于有序离散点数据的拟合效果较差。高斯拟合法迭代收敛的平均计算量大，系统响应时间长，因此适用性不好。三次样条插值函数的曲线经过所有的拟合数据点，拟合系数可以调整曲线的曲度和点的重合度，可以得到较好的拟合结果。三种路径规划方法的拟合参数如表6所示，由表6可知，三次样条插值法的拟合度最高，均方根误差最小，因此该方法比较适用。

表6 3种路径规划方法的拟合结果
Tab. 6 Fitting results of the three path planning methods

规划方法 R2 RMSE多项式拟合 0.970 6 3.336 8高斯拟合 0.980 4 2.807 6三次样条插值 0.995 6 1.477 6

在实际焊接中，考虑到存在焊缝形状复杂、采集数据量大及误差等因素的影响，最小二乘法生成的曲线拟合效果较差，而高斯拟合的计算量过大且过程复杂，故选择三次样条插值法来规划焊接路径。

2.3 焊缝跟踪

实验前，先在焊件上标记焊接路径的起点与终点，而后驱动机器人以示教方式运动，记录此过程中焊枪中心的位姿坐标值，作为对比基准。实验时，机器人带动传感器扫描焊件，通过软件实时采集末端坐标系的位姿数据，采集周期与传感器的扫描周期一致，即每道坡口的截面数据对应机器人的一个位姿数据；然后，提取特征点并将其转换至基坐标系下，与基准进行对比，结果如图16所示。

图16 焊缝跟踪实验结果Fig. 16 Experimental results of welding seam tracking

通过比较计算所得的焊接中心点与实际焊枪末端点之间的偏差，来评价特征点定位方法的准确性。其中：平均偏差记为

a

，表示每个焊接中心点与焊枪末端点坐标值之差的平均值，单位为mm；偏差度记为

d

，表明在该方向上所产生的偏差相对于整个坡口的偏移程度，无量纲。两者的计算公式分别为：

式中：

a

、

a

为

X

、

Z

方向上的平均偏差；

d

、

d

为

X

、

Z

方向上的偏差度；

x

、

z

为 焊接中心点的坐标；

x

、

z

为轨迹基准点的坐标；

n

为焊接中心点的个数，文中

n

=130；

l

为坡口的长度，计算得

l

=9.39 mm；

h

为坡口的深度，计算得

h

=8.03 mm。

由上述公式计算实验偏差，结果见表7。

实验的误差分析主要计算特征点相对于基准的平均偏差

a

以及偏差程度

d

，分析表7中的数据可知：

表7 焊缝跟踪的实验结果
Tab. 7 Experimental results of seam tracking

焊缝类型第1组（初步定位） 第2组（精确定位）ax//mm az/mm dx/% dz/% ax/mm az/mm dx/% dz/%直线 0.6280.2146.6882.6650.3870.2514.1213.126曲线 0.7360.1857.8382.3030.4290.2304.5692.864

1) 两组实验中，两类焊缝在

Z

方向的平均偏差

a

均较小。初步定位时，曲线焊缝的

a

取得最小值0.185 mm。经精确定位后，两类焊缝的

a

分别增加0.037、0.045 mm，但其最大值0.251 mm<0.5 mm，仍然满足精度要求。2）第1组实验中，即只进行初步定位时，两类焊缝在

X

方向的平均偏差

a

均 较大。其中，曲线焊缝的

a

最大，达0.736 mm。经精确定位后，两类焊缝的

a

分别降为0.387、0.429 mm，提升幅度分别超过38.4%、41.7%，达到<0.5 mm的精度要求。

由以上分析知，经精确定位后两类焊缝特征点的平均偏差均小于0.5 mm，达到自动焊接的精度要求。

3 结 论

1）设计了一套基于激光传感与视觉信息提取的焊缝跟踪系统，采用扫描、滤波、特征点提取与路径规划的方法实现焊缝跟踪。

2）通过传感器采集坡口信息并对数据进行滤波处理，由图像特征点的2维坐标计算出传感器坐标系下相应的3维坐标值。

3）解决了焊件表面存在缺陷时特征点定位的精度问题。经实验验证，精确定位后的两类焊缝特征点的平均偏差均小于0.5 mm。