1.一种用于激光-电弧复合焊的主动激光视觉稳健焊缝跟踪系统,其特征在于:包括:激光-复合焊接机器人(1)、主动激光视觉系统(2)、激光光源(3)、图像处理系统(4)和控制系统(5),所述主动激光视觉系统(2)和激光光源(2)均设于激光-复合焊接机器人(1)上,所述图像处理系统(4)设于控制系统(2)中,所述激光-复合焊接机器人(1)、主动激光视觉系统(2)、激光光源、图像处理系统(2)均与控制系统(4)连接;
所述激光-复合焊接机器人(1)中设有工业机器人(11)、激光复合焊接头(12)、送丝机构(13)和焊接电源,所述激光复合焊接头(12)设于工业机器人(11)的前臂上,所述送丝机构(13)设于激光复合焊接头(12)的一侧,所述焊接电源对激光-复合焊接机器人(1)提供焊接电流、电弧电压、送丝速度等参数一体化调节。
2.根据权利要求1所述的用于激光-电弧复合焊的主动激光视觉焊缝跟踪系统,其特征在于:所述工业机器人(11)采用六轴工业机器人,其中设有基座(111)、机器臂和驱动机构(112),所述机械臂中设有下臂(113)和前臂(114),所述基座(111)上设有用于安装下臂(113)的安装座(115),所述下臂(113)下部与安装座(115)采用活动式连接,所述前臂(114)安装于下臂(113)的顶部,且两者采用活动式连接。
3.根据权利要求1所述的用于激光-电弧复合焊的主动激光视觉焊缝跟踪系统,其特征在于:所述主动激光视觉系统(2)中设有激光视觉传感器和工业相机。
4.根据权利要求1所述的用于激光-电弧复合焊的主动激光视觉焊缝跟踪系统,其特征在于:所述控制系统(4)中设有视觉控制器、机器人控制器和控制器,所述视觉控制器中设有第一中央处理单元、第一内部存储单元、视觉传感器接口以及第一通讯接口,所述视觉传感器接口的两端分别主动激光视觉系统(2)和第一内部存储单元连接,所述第一内部存储单元、视觉传感器接口以及第一通讯接口均与第一中央处理单元连接;
所述机器人控制器中设有第二中央处理单元、第二内部存储单元、第二通讯接口、驱动器、运动控制卡、输入/输出接口,所述输入/输出接口与第二内部存储单元连接,所述驱动器的输出端与驱动机械臂的电机的输入端连接,所述电机的输出端与机械臂连接,所述运动控制卡于机械臂中的编码器连接,所述第二内部存储单元、第二通讯接口、驱动器、运动控制卡、输入/输出接口均与第二中央处理单元连接,且所述机器人控制系统通过第二通讯接口与视觉控制系统中第一通讯接口连接;
所述视觉控制器、机器人控制器均与控制器连接。
5.根据权利要求1至4任一项所述的用于激光-电弧复合焊的主动激光视觉焊缝跟踪系统的工作方法,其特征在于:具体的工作方法如下:
1):首先通过激光视觉传感器通过将结构光投射到焊缝表面,识别出焊缝轮廓信息相关的激光条纹带;
2):然后工业相机获取上一步骤中产生的激光条纹带的图像,并将数据传送给图像处理系统(4),通过图像处理系统(4)的数据提取模块提取焊缝特征信息,从激光条纹带的中心线检测到焊缝位置后,即:进行无变形激光条纹基线探测和焊缝特征点提取;
3):然后再对焊缝进行智能跟踪,然后根据跟踪的结果来控制具体的焊接工作,在焊缝跟踪过程中会发现工业机器人(11)路径精确或者不精确两种情况;
4):当上一步骤跟踪过程中确认工业机器人(11)路径精确时,其具体的工作方法如下:a)、机器人控制器发出HOME位信号,工业机器人(11)到达程序初始位,然后工业机器人(11)开始搜索起始点;
b)、机器人控制器搜索机器人工具端TCP起始点;
c)、然后建立第一寄存器队列,记录与焊缝特征点对应的激光视觉传感器位置序列;
d)、然后判断机器人工具端TCP是否位于初始焊缝特征点,如果不是,那么其将要返回步骤b)至c)重新搜机器人工具端TCP起始点;如果是,那么机器人工具端TCP位于焊缝路径起始位置信号,然后机器人控制器开始焊接操作指令;
e)、然后机器人控制器开始焊缝跟踪操作指令;
f)、继续建立第一寄存器列队,记录与焊缝特征点对应的激光视觉传感器位置序列;
g)、机器人工具端TCP进行焊缝特征点跟踪操作;
h)、机器人工具端TCP点是否位于末位焊缝特征点,如果不是,那么其要返回步骤f)至g)重新进行第一寄存器列队建立;如果是,那么机器人工具端TCP位于焊接路径最末端位置信号;
i)、机器人控制器结束焊接操作指令;
5):在上述步骤3)在焊缝跟踪过程中会发现工业机器人(11)路径不精确,存在偏差时,需要对焊缝特征点轨迹的偏差进行补偿,使得机器人工具端TCP点沿较为精确的焊缝特征点所生成的路径运行,直至完成激光焊接操作即可。
6.根据权利要求5所述的用于激光-电弧复合焊的主动激光视觉焊缝跟踪系统的工作方法,其特征在于:步骤3)图像处理系统(4)的数据提取模块提取焊缝特征信息,从激光条纹带的中心线检测到焊缝位置具体的方法如下:所述图像处理系统(4)对主动激光视觉焊缝图像处理以及焊缝位置检测算法,其无需附加窄带滤波器;具体的工作方法包括两部分:(1)无变形激光条纹基线探测;(2)焊缝特征点提取;
1)无变形激光条纹基线探测的具体步骤如下:
步骤一:图像预处理
A、对工业相机所获取的激光条纹图像进行均值滤波处理;该均值滤波方法如下式所示:其中,为激光条纹宽度期望最大值,为第i行第j列像素的图像强度,为滤波后第i行第j列的结果值。
B、再将经处理图像从RGB色彩空间转换为HSV色彩空间,即再从图像中精确提取激光蓝光色彩,设定HSV三个通道的阈值,并对图像进行掩膜处理,三种阈值的设定使得低质量激光产生的低对比度激光条纹可获后续处理;
M=M1∩M2∩M3
其中,M1,M2,M3,分别为H,S,V三通道的掩膜阈值,i,j分别为像素行列编号,为最终所获掩膜交集区域;
C、原RGB图像再经灰度处理,转换为灰度图像,方法为:
Grey=0.299*R+0.587*G+0.114*B
将原本的RGB(R,G,B)中的R,G,B以Grey替换,形成新的颜色RGB(Grey,Grey,Grey),即可形成替换RGB(R,G,B)的单一通道灰度图,经掩膜交集应用至该单一通道灰度图;
D、然后再对图像进行中值滤波,去除椒盐、斑点噪声,即:中值滤波用一个含有奇数点的滑动窗口,将邻域中的像素按灰度级排序,取中间值为输出像素;
由上述步骤一经处理所得的图像用于后续进一步的图像处理过程;
步骤二:激光条纹轮廓探测
A、通过激光峰值探测的方法,提取表征激光条纹带的轮廓边缘像素点,即:领激光条纹竖直,设定水平每行像素取舍的强度阈值,获取强度峰值点,形成激光条纹带基础;再对水平方向形成的像素强度峰值点进行噪声滤波;对所获取像素强度峰值点进行拟合,返回得到激光条纹基线位置;
B、焊缝特征点提取
以竖直的激光条纹带所获的基线为例,可知在基线上,沿基线的变形区域可视为含有焊缝特征点的位置:从激光条纹带图像上提取这些焊缝特征点的步骤可概括为:一、确定竖直方向ROI;
二、交叉点的标示与选择;三、确定水平方向的ROI;四、探测焊缝水平峰值点;
围绕先前所获的激光基线,对经滤波的图像依照如下方法进行裁剪,可确定竖直与水平方向ROI;
竖直ROI由下式获得,
ROI(i,c)=I(i,j)
其中
其中,LW为所期望的激光条纹带宽度,N为图像的行数。I(i,j)为第i行第j列的图像强度。ROI(i,c)为图像的感兴趣区域,p为原始图像中所探测的激光线条的列标;
从中,获得所提取激光线段变形区域的上部顶端特征点与下部底端特征点;
水平ROI由下式获得,
ROI(c,j)=I′(i,j)
其中,Ytop≤i≤Ybottom;min(Xtop,Xbottom)≤j≤M式中,Ytop,Xtop,Ybottom,Xbottom为图像I(i,j)中的交汇点集中上部顶端点与下部底端点的y轴与x轴的坐标值,M为图像I(i,j)的列数目;
从中,可获得所提取激光线段变形区域的焊缝水平峰值特征点,获取焊缝水平峰值特征点的方法如下:步骤一:去除噪声点,提取水平ROI内激光带上的轮廓点,即所提取激光条纹带轮廓变形区域的特征点;
步骤二:将ROI内激光条纹带的轮廓分为上部与下部两区,依据如下约束条件,分别在上下部区域内轮廓之外的部分,将激光条纹轮廓变形区内的间断点补充连续;
-LW≤Pci≤LW
其中,LW为所期望的激光条纹带的宽度,Pci为所补充间断点的列标。步骤三:对上述完全ROI内上下部激光条纹带上轮廓点与所补充的间断点组成的点集分别进行线性拟合,所得的两条直线交点即可确定为焊缝峰值特征点。
7.根据权利要求5所述的用于激光-电弧复合焊的主动激光视觉焊缝跟踪系统的工作方法,其特征在于:当步骤5)中,在焊缝跟踪过程中会发现工业机器人(11)路径不精确,存在偏差时,需要对焊缝特征点轨迹的偏差进行补偿,其具体的跟踪方法如下:a)、机器人控制器发出HOME位信号,工业机器人(11)到达程序初始位,然后工业机器人(11)开始搜索起始点;
b)、机器人控制器搜索机器人工具端TCP起始点;
c)、然后建立第一寄存器队列,记录与焊缝特征点对应的激光视觉传感器位置序列;
d)、然后判断机器人工具端TCP是否位于初始焊缝特征点,如果不是,那么其将要返回步骤b)至c)重新搜机器人工具端TCP起始点;如果是,那么机器人工具端TCP位于焊缝路径起始位置信号;
e)、机器人控制器判断工业机器人(11)是否进行空跑运行;
f)、在步骤e)中得出的结果显示工业机器人(11)如果不是在空跑运行,那么机器人控制器将命令其继续建立第一寄存器列队,记录与焊缝特征点对应的激光视觉传感器位置序列;
g)、机器人工具端TCP位于焊接路径最末端位置信号;
i)、机器人控制器结束焊接操作指令;
h)、在步骤e)中得出的结果显示工业机器人(11)如果是在空跑运行,那么机器人控制器将命令其建立第二寄存器队列记录与焊缝特征点对应的视觉传感器位置序列;
j)、机器人控制器判断工业机器人(11)是否完成W次空跑,监测的结果如果显示未完成,那么其将重复步骤a)至h);
k)、如果上一步骤中监测的结果显示工业机器人(11)完成W次空跑,那么其将计算W次空跑所得焊缝特征点最优估计及对应的激光视觉传感器位置序列;
l)、然后机器人控制器命令工业机器人(11)开始焊接操作;
m)、工业机器人(11)接收到焊接操作指令后,开始焊接操作;
n)、机器人控制器开始焊缝跟踪操作指令;
o)、机器人工具端TCP参照最优估计焊缝特征点进行跟踪操作;
p)、然后机器人控制器看机器人工具端TCP点是否位于末位焊缝特征点,如果不是,那么其要返回步骤f)至g)重新进行第一寄存器列队建立;如果是,那么机器人工具端TCP位于焊接路径最末端位置信号;
q)、机器人控制器结束焊接操作指令。