-
湖南科天健光电
技术有限公司
焊接质量实时在线图像检测相机选择
1.
背景
自动化焊接是当今工业自动化的
重要组成部分,而焊接过程中的实时质量检测与控制
则是技术重点和难点。
焊接在线实时检测就是边焊接边检测,
发现有质量问题,
可立即采取
相应措施。
实时在线检测采用的传感器有超声波
传感器、
温度场传感器、
电弧传感器及视觉
传感器等,
其中视觉传感器所获得的信息量大,
结合计算机
视觉和图像处理的最新技术成果,
大大增强了自动化焊接机器人的外部适应能力,
其研究和发展最引人注目。
视觉传感器直接
测
量焊接熔池,
获得的数字图像表象直观,
信息丰富,
且数字化的图像数据可以实时传输到
计算机高速内存中,
< br>进行实时图像处理,
提取焊接熔池的特征信息,
并据此作
出在线实时判
决,
从而实现焊接质量的实时检测与闭环反馈控制
。
用机器视觉图像直接测量焊接熔池已成
为重要的研究和应用方
向,
它可用于焊缝跟踪、
焊接过程稳定性监测和熔透控制等方面
,
有
独特的的优势。
2.
焊接熔池成像关键技术要求和视觉系统分类介绍
我们知道,焊接是在要焊件的工件表面形成局部高温,使工件表面局部熔化,形成熔
< br>池,
熔池冷却固化完成焊接。
整个焊接区域的不同部位发
光特性相差很大,
焊接中心温度通
常非常高,会形成发出耀眼强
光的等离子体,其边缘是材料熔化后的熔池,熔池温度较低,
只有很弱的光辐射,
这使视觉传感器观测区域不同部位的光强差异很大,
焊接等离子体的辐
射光强度通常远远超过焊接熔池的辐射光强,
使要观测区域的光
强动态范围非常大,
通常大
于
100d
B
。
焊接在线实时检测中焊接图像通常用数字工业相机来摄取,
获得清晰熔池图像面
临的最大困难是要克服焊接等离子体形成的
强光干扰。
一般,
如果不采取措施,
焊
接实时检
测图像获取系统的入射光强会超过工业相机传感器的响应上限,
即焊接等离子体的强辐射光
是如此之强,会使一般工业相机的所有或大部分感光
单元在其曝光的短时间内达到光照饱
和,
从而使相机感光单元的
输出达到电饱和,
无法重现焊接熔池中心及边缘部分的图像细节,
熔池图像的细节会完全丢失。
为了避免熔池图像的细节信息被焊接等离子体强光淹没,
焊接
实时检测的图像获取系统必须选用动态范围尽可能大的数字
工业相机,并采取适当的滤光、
衰减或辅助脉冲照明等其他措施。
从国内外大量文献来看,焊接实时检测的图像获取系统中采集熔池图像的方法主要分
为主动式直接视觉传感和被动式直接视觉传感两大类。
主动式直
接视觉传感利用窄带复合滤
湖南科天健光电技术有限公司
RockeTech Technologies Ltd.
Tel: +86-731-88577190
Addr:
湖南省长沙市开福区芙蓉中路一段
19
8
号名富公寓
1917
室
Zip:410008
Website:
Http://
湖南科天健光电技术有限公司
光系统
滤除非连续光谱的电弧强光,
并采用高强度脉冲闪光作为辅助光源,
可有效地抑制弧
光获得清晰图像。
工业相机成像的光路系统
中加有与高强度脉冲闪光波长相匹配的窄带光学
滤光器,
工业相
机的快门与高强度脉冲闪光同步,
因此成像时高强度脉冲闪光能有效地抑制
弧光的干扰,
同时也抑制了其它波长的干扰,
提高图
像的信噪比。
主动式直接视觉传感系统
结构比较复杂,应用中的
调整也较困难,限制了其应用。
被动式直接视觉传感是利用焊
接过程中的自发光进行成像。被动式直接视觉传感面临
前面所述的强光干扰的问题,
p>
所以被动式直接视觉传感通常采用动态范围尽可能大的工业相
机,<
/p>
并采取适当的辅助措施。
如激光焊接中,
通常采用中性减光的办法减小强光干扰的问题;
在电弧焊接中,
对于短路电弧焊和脉冲电弧焊,
可在短路期间或基值电流期间获取图像数据;
TIG/MIG/MAG
焊时弧光在
600nm
~
700nm
波段内相对光强最弱最
稳定,
选用这一波段内
的干涉带通滤光片可有效地排除弧光干扰
。被动式直接视觉传感和人的视觉特性更为相似,
且因为系统结构简单,
调整方便,
传感器结构价格低,
而使它是成为当今研究
最活跃、
应用
最广泛的一种视觉传感方法。
要获得在强光等离子体条件下的焊接熔池中心及边缘部分的清晰图像,对焊接实时
检
测的图像获取系统中的关键部件数字工业相机提成了一些独特的技术要求,
后续几个部分我
们将讨论不同数字工业相机特性差异,
并介绍一特别适合焊接实时检测图像获取系统的工业
相机。
3.
工业相机特性介绍及其差异
当前应用
最广泛的数字工业相机有
CCD
数字工业相机和
CMOS
数字工业相机两大
类。
?
CCD
数字工业相机
CCD
是电荷藕合器件(
Charge
Coupled
Device
)的简
称,它是应用最广泛的图像传感
器之一。
一个
< br>CCD
图像传感器是成像像元为
X-Y
< br>纵横矩阵排列,
每个成像像元由一个光电
二极管和其控制
的一个相邻电荷存储区组成。
光电二极管将光线
(光子)
转换为电荷
(电子)
,
电荷存储区收集到的电子总数量与光线的强度成正比。
在读取这些电荷时,
各列电荷存储区
收集到的光生电子被移动到垂直电荷传输方向的电荷传递寄
存器中,
然后各列电荷传递寄存
器中的电荷按行被移到总的行电
荷传递寄存器中,
总的行电荷传递寄存器中每行的电荷信息
再被
连续读出,
通过同一电荷
/
电压转换器
和放大器来生成图像信息。
当光强不太强时,
CCD
湖南科天健光电技术有限公司
RockeTech Technologies Ltd.
Tel: +86-731-88577190
Addr:
湖南省长沙市开福区芙蓉中路一段
19
8
号名富公寓
1917
室
Zip:410008
Website:
Http://
湖南科天健光电技术有限公司
传感器的响应是线性的,
CCD
p>
像元内的电荷存储区可以存储全部光电荷,此为线性范围。
当光强继
续增大时,
因为电荷存储区已存储了很多光生电荷,
由光生电荷
产生的电场会妨碍
像元按线性继续积累电荷,
CCD
便进入了饱和区。如果光强进一步增大,电荷存储势阱将
填满电子,
而过剩的电子会向外溢出。
如果没有特殊措施,
溢出的电子将进入相邻像素,
致
使本来工作在线性区域的相邻
像素在收集到溢出电子后进入饱和区或也向外溢出电子,
使图
像
出现光晕现象,图像清晰度也就明显下降了。
CCD
图像传感器
的原理和结构使其有较好
光照灵敏度高、噪音低、图象质量较高的优点,一般
CCD
工业相机的动态范围在
60dB
左
右。但在图像中有高亮度的点或区域时,
CCD
图像传感器存在让图像质量严重劣化的
“
Blooming
”和“
Smear
”效应。
“
Blooming
”效应
当成像视场中存
在亮度较高
的点光源
或亮区域时
,
CCD
在亮点光
源附件区域有
Blooming
或称为“开花”
(也叫光晕或
高光溢出)的效应。它是
CCD
传感器像素在受到强
光照射时,亮点区域像元获得的光照过强,像元光电二极管在强光下产生的光电子数超过< p>
CCD
电荷存储区可以存储的最大电子数而溢出,
溢出的电子将沿行或列方向进入相邻像素,
“污染”
相邻图像区域
(
使相邻区域也饱和
)
,图像出现
B
looming
“开花”
(光晕)现象,
Blooming
会导致相机图像清晰度明显下降,严重影响成像的质量。不同程度
的“
Blooming
”
会使图像出现
不同程度的光晕图像,
光晕图像无法真实反映要观测区域的细节信息,
< br>会丢失
许多有用的信息。
焊接实时检测的图像获取系统中
,
如果没有特殊的抗干扰措施,
焊接等离
子体的强光会在
CCD
工业相机上产生严重的光晕,使焊接熔
池中心及边缘部分的图像信息
全部损失。
“
Smear
”效应
CCD
相机视场中点光源或亮区域亮度不断提高时,
Blooming
不断增强,
图像中亮区域
< br>的分散范围逐渐扩大,当
Blooming
很强时,便会
出现条形光晕图像,即让图像质量严重劣
化的
Smear
(垂直拖光)效应。
Smear
(垂直拖光)
是视场中点光源或亮区域亮度很高时,
CCD
传感器像元光电二
极管产生的光电子数太多,溢出的光电子进入相邻的本来被屏蔽不
感光的垂直电荷传递寄
存器中,
或入射光经过像元光电二极管区域的反射或折射进入被屏蔽
不感光的垂直电荷传递寄存器中形成光电子,造成该列上的电荷传递寄存器中有寄光强分
布,导致如下图所示的
Smear
(垂直拖光)效应,图像
质量严重劣化。
湖南科天健光电技术有限公司
RockeTech Technologies Ltd.
Tel: +86-731-88577190
Addr:
湖南省长沙市开福区芙蓉中路一段
19
8
号名富公寓
1917
室
Zip:410008
Website:
Http://
湖南科天健光电技术有限公司
图
p>
1
、
Smear
(
垂直拖光)效应原理示意图及其实例图像
< br>因为
CCD
图像传感器存在让图像质量严重劣化的“
p>
Blooming
”和“
Smear
”效应,以
及
CCD
的动态范围比较小,一般
60dB
左右,
CCD
工业相机很难在焊接等离子体的强光干
扰下获取焊接熔
池中心及边缘部分的图像细节信息,
CCD
不是特别适合焊接实
时检测图像
获取的工业相机。
?
CMOS
数字工业相机
CMOS
是
Complimentary
Metal Oxide Semiconductor (
互补型金属氧化半导体
p>
)
的简称,
CMOS
和
CCD
传感器一样,是在
Si
p>
(硅)半导体材料上制作的。新一代
CMOS
采用有源
像素设计,每个像元由一个能够将光子转化成电子的光电二极管、一个电荷<
/p>
/
电压转换器、
一个重置和一个选取晶体
管,以及增益放大器组成。
CMOS
传感器结构排列上像是一个
计
算机内存
DRAM
或平面显示器,<
/p>
覆盖在整块
CMOS
传感器上的金属格子
将时钟信号、
读出
信号与纵队排列输出信号相互连接。
CMOS
图像传感器的每个像元内集成的电荷
/
电压转换
器把像元产生的光电荷转换后直接输出电压信号,
p>
以类似计算机内存
DRAM
的简单
X-Y
寻
址技术的方式读出信号,
这种方式允许
CMOS
从整个排列、
部分甚至单个像素来读出信号,
这一点是和
CCD
p>
完全不一样的,
也是
CCD
做不到的。
另外,
内置的电
荷
/
电压转换器实时
把光电二极管生成
的光电荷转换成电压信号,原理上消除了“
Blooming
”
和“
Smear
”效应,
使强光对相邻
像元的干扰降到很小。
2000
年前
,
CMOS
较大的噪声使其图像质量较差。近年,随着半导体主
流制造的工艺
进步、材料特性不断提高,集成晶体管尺寸大幅缩小,以及
CMOS
电路消噪技术的不断发
展,使采用了有源像素
设计的新一代
CMOS
器件在暗电流、电路噪声、串扰噪声方面
得到
很好的控制,整体噪声水平大大降低,工业级器件的图像质量已经接近
CCD
的水平。此外
CMOS
传感器还可以从主流半导体加工技术和材料的改良中不断获益,提高其性能。重要
的是
,
CMOS
传感器是在高产量的半导体厂以标准的现代大规模集
成电路加工方式加工制
湖南科天健光电技术有限公司
RockeTech Technologies Ltd.
Tel: +86-731-88577190
Addr:
湖南省长沙市开福区芙蓉中路一段
19
8
号名富公寓
1917
室
Zip:410008
Website:
Http://
湖南科天健光电技术有限公司
作而成
,芯片的成本比
CCD
芯片低很多,其外部驱动及转换电路也可
以在同一半导体加工
过程中很容易的集成到同一芯片上,因此
C
MOS
相机的整体成本也较低。
新一
代
CMOS
传感器像元内部集成的放大器增益是可程控的,可设
定像元内部集成放
大器的增益特性,
让其根据入射光信号的强弱
调整增益水平,
使放大器特性不再仅是线性的。
现代
CMOS
相机具有多种输出模式:线性模式、双斜率模式、对数模式和
p>
γ
校正模式等,
不同的输出模式,对应的信
号动态范围不同,可适应不同的使用要求。如瑞士
PhotonFocus
采用其专利的
LinLog
TM
技术后,像元放大器特性增益特性可程控设置为多段类对数特性,
动态范围提高很大,最大动态范围可达
120dB
。<
/p>
在焊接应用中,观测区域辐射光强的差异很大,光强动态范围通
常大于
100dB
。对这
种光强变化剧
烈的应用,
CMOS
因为没有“
Blo
oming
”
,
“
Smear
”效应,通过设定像元放大
器增益特性尽可能扩
展其动态范围,
获取焊接熔池的清晰图像有了可能。
下图是用数
字
CCD
工业相机和
Photonfo
cus
的数字
CMOS
工业相机拍摄的
激光焊接的焊点图像:
图
2
、
CCD
和
CMOS<
/p>
相机拍摄的焊接图像
从图中我们可以看
出,数字
CCD
工业相机的动态范围只有
60dB
,拍摄中,焊点中
心的光强太强,引起
Blooming
,使焊点周围熔化部分的熔池图像细节完全损失;而
Photonfocus
的数字
CMOS
p>
工业相机,可以获得很好的焊接熔池图像细节,这为后续的
图像分析
和焊接质量实时检测控制提供了基础。
湖南科天健光电技术有限公司
RockeTech Technologies Ltd.
Tel: +86-731-88577190
Addr:
湖南省长沙市开福区芙蓉中路一段
19
8
号名富公寓
1917
室
Zip:410008
Website:
Http://
-
-
-
-
-
-
-
-
-
上一篇:PCR扩增过程中常见的问题及解决方法
下一篇:科研用CCD基本参数概念