首页 / 专利库 / 显示技术 / 立体像对 / 激光视觉轮廓测量系统及测量方法、立体靶标

激光视觉轮廓测量系统及测量方法、立体靶标

阅读:223发布:2024-01-25

专利汇可以提供激光视觉轮廓测量系统及测量方法、立体靶标专利检索,专利查询,专利分析的服务。并且本 发明 公开了一种激光视觉轮廓测量系统及方法、立体靶标,该系统包括测量部分和标定部分,所述测量部分包括四个一字线状 激光器 和四个CCD摄像机,其中每个激光器与CCD摄像机组成一个 传感器 ;所述标定部分包括一中空立方体结构的立体靶标,测量方法具体为,先利用立体靶标实现测量系统的标定和坐标统一,之后实现本测物的三维轮廓测量。利用该LED立体靶标,在标定过程中只需要在摄像机视场范围中把靶标随意摆放几个 位置 即可,操作简单,可以迅速便捷的完成对传感器全局统一标定,并能够应用于工业现场;对于需要全方位测量物体截面轮廓的场合,如对各种机械零件截面轮廓尺寸在线检测,本方案有较好的技术优势。,下面是激光视觉轮廓测量系统及测量方法、立体靶标专利的具体信息内容。

1.一种立体靶标,其特征在于,所述立体靶标为一中空立方体结构,每个靶标面均为边长120mm的正方形,每个靶标面上设置有特征圆孔,所述特征圆孔大小相同,彼此之间的位置关系相同。
2.一种激光视觉轮廓测量系统,包括测量部分和标定部分,其特征在于,所述测量部分包括四个一字线状激光器和四个CCD摄像机,其中每个激光器与CCD摄像机组成一个传感器,一共组成四个所述传感器并分别设置于四个机械架上,各传感器环绕在被测物周围,四个一字线状激光器投射光能全部覆盖一个被测物截面且都在对应摄像机视场范围内;所述标定部分包括一立体靶标,所述立体靶标为一中空立方体结构,每个靶标面均为边长120mm的正方形,每个靶标面上设置有特征圆孔,所述特征圆孔大小相同,彼此之间的位置关系相同;所述立体靶标每个靶标面上的特征圆孔均由相同颜色LED点亮;
激光投射到被测物表面之后,靶标面上的光条受被测物表面反射光的调制,对应CCD摄像机拍摄被测物的三维图像,图像中的光条包含了被测物表面的三维信息,将被测物的三维图像经由以太网传送至计算机,由计算机利用标定得来的各传感器参数等计算得出被测物截面三维数据。
3.一种激光视觉轮廓测量系统测量方法,其特征在于,该方法包括以下步骤:
步骤(1)、打开激光器,将立体靶标按照Zhang标定方法摆放于10个不同位置,且每个摄像机对应于靶标面及各靶标面上的光条在相应摄像机视场范围内且成像清晰;利用CCD摄像机采集标定图,对标定图进行处理计算,计算过程依顺序包括:特征圆孔边缘提取、椭圆拟合、椭圆中心特征点提取、摄像机标定、光条中心提取、光平面拟合,以及进行坐标系统一;
步骤(2)、通过提取光条中心特征点,结合Zhang摄像机模型,反算出被测物体截面轮廓尺寸,具体处理如下:
首先通过摄像机坐标系下的坐标值(xc,yc,zc)和光平面方程约束得到图像光条中心点(u,v)和摄像机坐标系下点坐标(xc,yc,zc)之间一一对应关系,建立起从二维像素坐标到摄像机坐标系坐标的一一映射关系;然后将摄像机坐标系下的点通过坐标系变换,即利用标定得到的旋转矩阵和平移矩阵,转换得到测量坐标系下被测物的截面轮廓三维坐标,其中:
摄像机坐标系下光平面方程约束为:
axc+byc+czc+d=0
图像上某点在摄像机坐标系下的坐标值(xc,yc,zc)为:
4.如权利要求3所述的一种激光视觉轮廓测量系统测量方法,其特征在于,所述特征圆孔边缘提取、椭圆拟合、椭圆中心特征点提取、靶标平面确定的步骤,具体包括以下处理:
对靶标特征圆进行椭圆拟合以求取椭圆中心,得到靶标面上每个特征圆孔圆心在计算机图像坐标系里的坐标Iuv,根据标定图中任意两特征点之间的像素距离大小可以确定每个靶标面的中心圆,之后找出距离中心圆最近的四个特征圆,根据这四个特征圆和中心圆之间相对位置关系即可确定靶标面上其他特征圆的拓扑关系;由此得出各个特征点在对应靶标面坐标系里的坐标(xwi,ywi,zwi);将Iuv和(xwi,ywi,zwi)代入标定函数获得每个摄像机的内参数ki1、ki2、pi1、pi2、fxi、fyi、(u0i,v0i)、dxi、dyi和外参数Rij、Tij;其中i=1,2,3,4代表第几号摄像机,j代表第几个标定位置;
T
设每幅标定图像的旋转矩阵Rij的第三列为(r3ij,r6ij,r9ij),以它为当前标定位置靶标T
面法向量,以该标定图的平移向量Tij(t1ij,t2ij,t3ij)为靶标面原点在对应摄像机坐标系中坐标,则可得到该位置处靶标面在对应摄像机坐标系下的方程:
r3ij·xcij+r6ij·ycij+r9ij·zcij=r3ij·t1ij+r6ij·t2ij+r9ij·t3ij。
5.如权利要求3所述的一种激光视觉轮廓测量系统测量方法,其特征在于,所述光条中心提取,具体包括以下处理:
设标定图中光条中心某点的图像坐标为(u′ij,v′ij),对(u′ij,v′ij)去畸变处理后得到矫正后光条中心该点图像坐标(uij,vij),利用(uij,vij)和公式(1)及摄像机坐标系测量模型计算得到每幅标定图中光条中心各点在对应摄像机坐标系中的坐标。
6.如权利要求3所述的一种激光视觉轮廓测量系统测量方法,其特征在于,所述光平面拟合,具体包括以下处理:
标定时靶标摆放了j个不同位置,这样对每个激光器来说可以得到在同一光平面上的j条光条中心线上点在对应摄像机坐标系中坐标,对这些点进行主元分析法空间平面拟合,得到每个激光器投射光平面在对应摄像机坐标系下的方程。
7.如权利要求3所述的一种激光视觉轮廓测量系统测量方法,其特征在于,所述坐标统一,具体包括以下处理:
设Rk1、Tk1为在靶标第一个标定位置时,第k(k=2、3、4)靶标坐标系到坐标系
Ow1-Xw1Yw1Zw1转换时的旋转矩阵和平移向量,得到:
由此通过Rk1、Tk1(k=2,3,4)计算得出被测物截面轮廓在在坐标系Ow1-Xw1Yw1Zw1下的坐标,到此完成了对整个系统的标定及测量坐标系的全局统一。

说明书全文

激光视觉轮廓测量系统及测量方法、立体靶标

技术领域

[0001] 本发明涉及一种结构光三维视觉检测技术,特别是涉及一种激光视觉轮廓测量系统快速标定方法及其立体靶标。

背景技术

[0002] 结构光三维视觉测量技术,具有视觉测量的非接触、速度快、自动化程度高,柔性好等优点。结构光三维视觉基于光学三法原理,通过计算采集图像的各种光模式特征点的偏移信息反算出被测物体的表面轮廓。光学投射器投射确定的光模式,使得结构光图像信息易于提取,因而测量精度较高,广泛应用于各种工业产品的在线检测。
[0003] 典型线结构光视觉传感器,由一个线结构光激光器和配套的摄像机组成。通过激光器垂直入射被测物表面,摄像机倾斜拍摄的方式,获取激光平面与被测物表面相交激光光条图像。通过视觉测量模型,将激光光条中心的图像坐标转换为被测物表面轮廓的二维坐标。当被测物运动或线结构光传感器做相对运动时,就能得到被测物表面的三维形貌。但是单套视觉传感器视场有限,往往只能获取被测物表面某一局部的轮廓信息,无法对被测物表面轮廓360°范围进行全方位测量。

发明内容

[0004] 为了克服上述现有技术,本发明提出了一种激光视觉轮廓测量系统及其快速标定方法及立体靶标,该系统采用四套线结构光传感器同时测量的方式,能够实现对被测物表面轮廓全方位的测量;同时为解决由于引入多传感器而带来的标定的复杂性和测量坐标系统一问题,本方案还结合Zhang摄像机标定过程,设计了一种新型LED立体靶标,并根据靶标特性,设计了轮廓传感器全局统一标定方法;以及,提出一种激光视觉轮廓测量系统,该系统采用LED立体靶标首先实现快速标定,然后实现被测物三维轮廓的准确测量方法。
[0005] 本发明提出了一种立体靶标,所述立体靶标为一中空立方体结构,每个靶标面均为边长120mm的正方形,每个靶标面上设置有特征圆孔,所述特征圆孔大小相同,彼此之间的位置关系相同。
[0006] 本发明还提出了一种激光视觉轮廓测量系统,包括测量部分和标定部分,所述测量部分包括四个一字线状激光器和四个CCD摄像机,其中每个激光器与CCD摄像机组成一个传感器,一共组成四个所述传感器并分别设置于四个机械架上,各传感器环绕在被测物周围,四个一字线状激光器投射光能全部覆盖一个被测物截面且都在对应摄像机视场范围内;所述标定部分包括一立体靶标,所述立体靶标为一中空立方体结构,每个靶标面均为边长120mm的正方形,每个靶标面上设置有特征圆孔,所述特征圆孔大小相同,彼此之间的位置关系相同;所述立体靶标每个靶标面上的特征圆孔均由相同颜色LED点亮;
[0007] 激光投射到被测物表面之后,靶标面上的光条受被测物表面反射光的调制,对应CCD摄像机拍摄被测物的三维图像,图像中的光条包含了被测物表面的三维信息,将被测物的三维图像经由以太网传送至计算机,由计算机利用标定得来的各传感器参数等计算得出被测物截面三维数据。
[0008] 本发明再提出了一种激光视觉轮廓测量系统测量方法,该方法包括以下步骤:
[0009] 一种激光视觉轮廓测量系统测量方法,其特征在于,该方法包括以下步骤:
[0010] 步骤1、打开激光器,将立体靶标按照Zhang标定方法摆放于10个不同位置,且每个摄像机对应于靶标面及各靶标面上的光条在相应摄像机视场范围内且成像清晰;利用CCD摄像机采集标定图,对标定图进行处理计算,计算过程依顺序包括:特征圆孔边缘提取、椭圆拟合、椭圆中心特征点提取、摄像机标定、光条中心提取、光平面拟合,以及进行坐标系统一;
[0011] 步骤2、通过提取光条中心特征点,结合Zhang摄像机模型,反算出被测物体截面轮廓尺寸,具体处理如下:
[0012] 首先通过摄像机坐标系下的坐标值(xc,yc,zc)和光平面方程约束得到图像光条中心点(u,v)和摄像机坐标系下点坐标(xc,yc,zc)之间一一对应关系,建立起从二维像素坐标到摄像机坐标系坐标的一一映射关系;然后将摄像机坐标系下的点通过坐标系变换,即利用标定得到的旋转矩阵和平移矩阵,转换得到测量坐标系下被测物的截面轮廓三维坐标,其中:
[0013] 摄像机坐标系下光平面方程约束为:
[0014] axc+byc+czc+d=0
[0015] 图像上某点在摄像机坐标系下的坐标值(xc,yc,zc)为:
[0016]
[0017] 与现有技术相比,本发明利用该LED立体靶标,在标定过程中只需要在摄像机视场范围中把靶标随意摆放几个位置即可,操作简单,可以迅速便捷的完成对传感器全局统一标定,并能够应用于工业现场;对于需要全方位测量物体截面轮廓的场合,如对各种机械零件截面轮廓尺寸在线检测,本方案有较好的技术优势。附图说明
[0018] 图1为本发明的激光视觉轮廓测量系统的结构示意图;其中:1-4、CCD摄像机;5-8、一字线状激光器;9-12、机械架;
[0019] 图2为LED立体靶标;13、激光条;14、靶标面;15、特征孔;16、坐标系一;17、坐标系二;
[0020] 图3为靶标特征提取;(a)采集的靶标图像;(b)椭圆拟合,特征提取;
[0021] 图4为不同直径塔轮层轮廓测量误差图。

具体实施方式

[0022] 下面结合附图和具体实施方式对本发明进行详细说明,但本发明的实施范围并不局限于此。
[0023] 为了解决单套视觉传感器视场有限,无法全方位测量被测物表面轮廓的问题,本发明提出了一套激光视觉轮廓测量系统,结合Zhang摄像机标定过程,以及设计了一种新型LED立体靶标,并根据靶标特性,设计了可应用于工业现场的快速统一标定方法。
[0024] 一、激光视觉轮廓测量系统
[0025] 如图1所示,为本发明计的激光视觉轮廓测量系统结构图。
[0026] 系统包含四个一字线状激光器和四个CCD摄像机及其它机械结构,其中每个激光器与CCD摄像机组成一个传感器,各传感器环绕在被测物周围,具有一定相对位置关系,激光器发散角和摄像机视场角应适当大,以满足四个激光器投射光能全部覆盖一个被测物截面且都在对应摄像机视场范围内。用于安装摄像机的机械架可以根据需要调节摄像机高度,摄像机固定部分具有一微小旋转结构用以调整摄像机倾角,根据需要可以对系统进行方便快捷的调节。
[0027] 激光投射到被测物表面之后,光条受被测物表面情况的调制,对应CCD摄像机拍摄图像,图像中的光条就包含了被测物表面的三维信息,将图像经由以太网传送至计算机,由计算机利用标定得来的各传感器参数等可计算得出被测物截面三维数据。同时,四个轮廓传感器的测量数据,需通过摄像机标定参数统一于同一测量坐标系下,才能完整显示某一时刻被测物截面轮廓。
[0028] 2、传感器标定及全局统一
[0029] (1)Zhang摄像机透视变换模型
[0030] Zhang模型一般以摄像机坐标系为空间坐标系,设空间某一点P在摄像机坐标系下的坐标为(xc,yc,zc),在最终物空间坐标系中坐标为(xw,yw,zw),则该模型的坐标系转换关系如下:
[0031]
[0032] 上式中,矩阵A为摄像机内参数矩阵,R、T为摄像机外参数矩阵。但是由上式可以看到,直接利用(u,v)并不能得出(xc,yc,zc)的唯一解,为此本发明引入摄像机坐标系下光平面方程约束:
[0033] axc+byc+czc+d=0 (2)
[0034] 这样就能建立起从二维像素坐标到摄像机坐标系坐标的一一映射关系。系统标定得到摄像机内外参数,k1、k2、p1、p2为摄像机径向畸变系数和切向畸变系数,以此对实际图像坐标(u1,v1)进行畸变校正,获取理想图像坐标(u,v),由(u,v)及光平面参数和摄像机内外参数可以得到图像上某点在摄像机坐标系下的坐标值(xc,yc,zc):
[0035]
[0036] 通过提取光条中心特征点,结合Zhang摄像机模型,反算出被测物体截面轮廓尺寸,方法如下:
[0037] 首先通过公式(3)和光平面约束(2)可以得到图像光条中心点(u,v)和摄像机坐标系下点坐标(xc,yc,zc)之间一一对应关系,然后将摄像机坐标系下的点通过坐标系变换,即利用标定得到的旋转矩阵和平移矩阵,转换得到测量坐标系下被测物的截面轮廓三维坐标。
[0038] (2)立体靶标
[0039] 如图2所示,为本发明所设计的LED立体靶标。
[0040] 该靶标是一中空立方体,每个靶标面均为边长120mm的正方形,每个靶标面上特征圆孔大小相同,位置关系相同,通过LED灯点亮各个特征圆孔,能够增强对比度,易于特征点的提取。系统标定采用Zhang标定方法,进行标定时只需要在摄像机视场范围内将靶标随意摆放几个位置,标定过程方便快捷,易应用于工业现场。
[0041] (3)标定方法
[0042] 如图2所示,立体靶标每个靶标面上的特征圆孔均由相同颜色LED点亮。各靶标面上特征圆孔分布均匀,在各个靶标面上建立的靶标面坐标系Owi-XwiYwiZwi(i=1,2,3,4),分布如图2所示,沿逆时针分布。系统以Ow1-Xw1Yw1Zw1为第一靶标面坐标系(见图2所示的白色坐标系),各靶标面坐标系均以中心圆圆心为原点,右手平方向为X轴正向,竖直向下为Y轴正向,垂直靶标面向里为Z轴正向。
[0043] 进行标定时,打开激光器并将靶标按照Zhang标定方法摆放10个不同位置,但需要保证每个摄像机对应靶标面及各光条在相应摄像机视场范围内且成像要清晰,如图3(a)所示。对标定图进行处理,提取光条中心,筛选轮廓,对靶标特征圆进行椭圆拟合以求取椭圆中心,得到靶标面上每个特征圆孔圆心在计算机图像坐标系里的坐标Iuv,根据标定图中任意两特征点之间的像素距离大小可以确定每个靶标面的中心圆,之后找出距离中心圆最近的四个特征圆,根据这四个特征圆和中心圆之间相对位置关系即可确定靶标面上其他特征圆的拓扑关系,如图3(b)所示。由此得出各个特征点在对应靶标面坐标系里的坐标(xwi,ywi,zwi)。将Iuv和(xwi,ywi,zwi)代入标定函数获得每个摄像机的内参数ki1、ki2、pi1、pi2、fxi、fyi、(u0i,v0i)、dxi、dyi和外参数Rij、Tij。其中i=1,2,3,4代表第几号摄像机,j代表第几个标定位置。(其中,ki1、ki2为镜头径向畸变参数,pi1、pi2为镜头切向畸变参数,fxi、fyi为镜头焦距在图像横纵坐标方向上的归一化焦距,(u0i,v0i)为光轴中心与图像的交点即图像中心,dxi、dyi为图像横纵两个方向上相邻像素中心间间距Rij为旋转矩阵,Tij为平移矩阵)T
[0044] 设每幅标定图像的旋转矩阵Rij的第三列为(r3ij,r6ij,r9ij),以它为当前标定位置T靶标面法向量,以该标定图的平移向量Tij(t1ij,t2ij,t3ij)为靶标面原点在对应摄像机坐标系中坐标,则可得到该位置处靶标面在对应摄像机坐标系下的方程:
[0045] r3ij·xcij+r6ij·ycij+r9ij·zcij=r3ij·t1ij+r6ij·t2ij+r9ij·t3ij (4)[0046] 设标定图中光条中心某点的图像坐标为(u′ij,v′ij),对(u′ij,v′ij)去畸变处理后得到矫正后光条中心该点图像坐标(uij,vij),利用(uij,vij)和公式(1)及摄像机坐标系测量模型可以计算得到每幅标定图中光条中心各点在对应摄像机坐标系中的坐标。标定时靶标摆放了j个不同位置,这样对每个激光器来说可以得到在同一光平面上的j条光条中心线上点在对应摄像机坐标系中坐标,对这些点进行主元分析法空间平面拟合,可以得到每个激光器投射光平面在对应摄像机坐标系下的方程。
[0047] (4)坐标系统一
[0048] 坐标系之间的转换可以通过两坐标系之间的旋转矩阵R和平移矩阵T来完成。根据立体靶标设计,四个靶标面之间具有严格的几何关系,它们中相邻两个靶标面相互垂直,每个靶标面上LED分布相同,因此在不考虑Yw轴方向时,Ow1-Xw1Yw1Zw1(i=1,2,3,4)在同一平面里。设Rk1、Tk1为在靶标第一个标定位置时,第k(k=2、3、4)靶标坐标系到坐标系Ow1-Xw1Yw1Zw1转换时的旋转矩阵和平移向量,由靶标面间几何关系可知:
[0049]
[0050] 由此通过Rk1、Tk1(k=2,3,4)可以计算得出被测物截面轮廓在在坐标系Ow1-Xw1Yw1Zw1下的坐标,到此完成了对整个系统的标定及测量坐标系的全局统一。
[0051] 最佳实施方式举例:根据测量范围,按照图2所示设计符合视场范围的靶标。然后按照图1所示系统结构搭建对应的测量系统。根据提出的标定方法,对采集的图像进行处理计算,按下列过程顺序完成:特征圆孔边缘提取,椭圆拟合,椭圆中心特征点提取,摄像机标定,光条中心提取,光平面拟合,坐标系统一,即可完成整个系统的标定。测量时,通过提取光条中心特征点,结合Zhang摄像机模型即可反算出被测物体截面轮廓尺寸。
[0052] 通过本方案,针对不同标称直径塔轮截面轮廓进行了测量,测量误差如图4所示。可以看出本方案具有较高的稳定性和可靠性,在测量范围内系统精度能够达到0.2mm。
[0053] 尽管上面结合图对本发明进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨的情况下,还可以作出很多变形,这些均属于本发明的保护之内。
高效检索全球专利

专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。

申请试用

分析报告

专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。

申请试用

QQ群二维码
意见反馈