一种基于多焦距摄像头组的车载机器视觉系统及实现方法专利检索-计算机图形学电脑图像专利检索查询-专利查询网

一种基于多焦距摄像头组的车载机器视觉系统及实现方法

阅读：412发布：2020-05-11

专利汇可以提供一种基于多焦距摄像头组的车载机器视觉系统及实现方法专利检索，专利查询，专利分析的服务。并且本发明涉及信号处理与机器学习技术，具体涉及一种基于多焦距摄像头组的车载机器视觉系统及实现方法，包括单目摄像头、双目摄像头、图形计算机系统、嵌入式通信单元和汽车控制器模块；单目摄像头采用长焦镜头，用于观测远距离目标，并识别目标的类别及位置信息，同时用于估计前方较远处的道路信息；双目摄像头采用相对位置固定并标定完成的两个相同的广角镜头，用于观测近处目标，并确定与近处目标的距离。该车载机器视觉系统成本低廉，适应性强，与传统的汽车车载机器视觉系统相比，具有同时兼顾远近各类目标，并带有一定的目标追踪与测距的功能。自动化程度高，无需驾驶员手动操作，能给驾驶员更广的有效视野和更佳的驾驶体验。，下面是一种基于多焦距摄像头组的车载机器视觉系统及实现方法专利的具体信息内容。

权利要求

1.一种基于多焦距摄像头组的车载机器视觉系统，其特征是，包括单目长焦摄像头模块和双目广角摄像头模块，与单目长焦摄像头模块和双目广角摄像头模块连接的图形计算机系统，与图形计算机系统依次连接的嵌入式通信单元和汽车控制器模块；单目长焦摄像头模块用于观测远距离目标，并识别目标的类别及位置信息，同时用于估计前方较远处的道路信息；双目广角摄像头模块用于观测近处目标，并确定与近处目标的距离。
2.如权利要求1所述的基于多焦距摄像头组的车载机器视觉系统，其特征是，单目长焦摄像头模块包括一个摄像头，其镜头为长焦镜头；双目广角摄像头模块为相对位置固定并标定完成的两个相同的摄像头，其镜头为广角镜头。
3.如权利要求1所述的基于多焦距摄像头组的车载机器视觉系统，其特征是，图形计算机系统包括计算机、图形计算单元、多个通信接口；通信接口导入单目长焦摄像头模块和双目广角摄像头模块的图像，经过图形计算单元计算得到距离深度图像算法和目标检测算法，并通过通信接口将结果输出至嵌入式通信单元。
4.如权利要求1所述的基于多焦距摄像头组的车载机器视觉系统，其特征是，嵌入式通信单元包括嵌入式控制器与CAN收发器，用于接收图形计算机系统的计算结果，并将计算结果发送至汽车控制器模块。
5.如权利要求1所述的基于多焦距摄像头组的车载机器视觉系统，其特征是，汽车控制器模块为车载计算机系统的主控单元，或自动驾驶控制器、汽车前大灯以及报警系统。
6.如权利要求2所述的基于多焦距摄像头组的车载机器视觉系统，其特征是，长焦镜头位于汽车正前方偏左的位置，实现对向来车的图像识别。
7.一种如权利要求1-6中任一项权利要求所述的基于多焦距摄像头组的车载机器视觉系统的实现方法，其特征是，包括以下步骤：
步骤1、读取双目广角摄像头模块图像数据并进行处理，粗测车辆前方是否存在物体；
步骤2、若存在物体，则通过双目图像距离算法计算物体的距离，若物体距离较近则输出物体的方位与距离；
步骤3、若物体距离较远，且在长焦镜头感应区内，则通过长焦高清图像进行目标检测，并输出物体信息；
步骤4、根据单目长焦摄像头模块图像数据，预估前方道路信息，并输出道路信息。

说明书全文

一种基于多焦距摄像头组的车载机器视觉系统及实现方法

技术领域

[0001] 本发明属于信号处理与机器学习技术领域，尤其涉及一种基于多焦距摄像头组的车载机器视觉系统及实现方法。

背景技术

[0002] 为了适应自动驾驶等应用场合的需要，在复杂多变的道路条件下，往往既需要关注近距离目标，如行人、障碍物等，同时又需要关注远处的目标，如对向来车，信号灯信息等。

[0003] 车载机器视觉系统是辅助驾驶系统中的重要组成部分，主要通过摄像头识别车辆前方车体和道路信息。车载机器视觉系统可以辅助驾驶员判断路面情况，从而帮助驾驶员做出正确的驾驶行为，减少因视觉原因带来的不当操作，使得车辆的运行更加稳定、可靠、安全，在一定程度上减少事故的发生。

[0004] 而如今的车载机器视觉系统大多采用单一焦距的摄像头，由于摄像头镜头的限制，长焦摄像头拍摄距离远，但拍摄角度往往较小，而广角摄像头拍摄角度大，但焦距较近，无法拍摄远距离物体。单一焦距摄像头无法同时兼顾大的拍摄角度和拍摄远距离物体的需求，导致在上述复杂道路条件下，机器视觉范围具有局限性，无法适应辅助驾驶及智能前大灯等应用的需要。

发明内容

[0005] 本发明的目的是提供一种满足在复杂多变的道路条件下，既能兼顾远距离较小角度及近距离大角度，又具有测距功能，适应汽车行驶过程中不同距离与范围内机器视觉需求的系统及实现方法。

[0006] 为实现上述目的，本发明采用的技术方案是：一种基于多焦距摄像头组的车载机器视觉系统，包括单目长焦摄像头模块和双目广角摄像头模块，与单目长焦摄像头模块和双目广角摄像头模块连接的图形计算机系统，与图形计算机系统依次连接的嵌入式通信单元和汽车控制器模块；单目长焦摄像头模块用于观测远距离目标，并识别目标的类别及位置信息，同时用于估计前方较远处的道路信息；双目广角摄像头模块用于观测近处目标，并确定与近处目标的距离。

[0007] 在上述的基于多焦距摄像头组的车载机器视觉系统中，单目长焦摄像头模块包括一个摄像头，其镜头为长焦镜头；双目广角摄像头模块为相对位置固定并标定完成的两个相同的摄像头，其镜头为广角镜头。

[0008] 在上述的基于多焦距摄像头组的车载机器视觉系统中，图形计算机系统包括计算机、图形计算单元、多个通信接口；通信接口导入单目长焦摄像头模块和双目广角摄像头模块的图像，经过图形计算单元计算得到距离深度图像算法和目标检测算法，并通过通信接口将结果输出至嵌入式通信单元。

[0009] 在上述的基于多焦距摄像头组的车载机器视觉系统中，嵌入式通信单元包括嵌入式控制器与CAN收发器，用于接收图形计算机系统的计算结果，并将计算结果发送至汽车控制器模块。

[0010] 在上述的基于多焦距摄像头组的车载机器视觉系统中，汽车控制器模块为车载计算机系统的主控单元，或自动驾驶控制器、汽车前大灯以及报警系统。

[0011] 在上述的基于多焦距摄像头组的车载机器视觉系统中，长焦镜头位于汽车正前方偏左的位置，实现对向来车的图像识别。

[0012] 一种基于多焦距摄像头组的车载机器视觉系统的实现方法，包括以下步骤：

[0013] 步骤1、读取双目广角摄像头模块图像数据并进行处理，粗测车辆前方是否存在物体；

[0014] 步骤2、若存在物体，则通过双目图像距离算法计算物体的距离，若物体距离较近则输出物体的方位与距离；

[0015] 步骤3、若物体距离较远，且在长焦镜头感应区内，则通过长焦高清图像进行目标检测，并输出物体信息；

[0016] 步骤4、根据单目长焦摄像头模块图像数据，预估前方道路信息，并输出道路信息。

[0017] 本发明的有益效果：本发明成本低廉，适应性强，与传统的汽车车载机器视觉系统相比，具有同时兼顾远近各类目标，并带有一定的目标追踪与测距的功能。系统中多种焦距摄像头测量距离远，近距离测量精度高，与同类产品例如车载雷达相比检测范围更远，成本更低，不会因为密集车辆造成雷达干扰失效，性能更可靠。本发明自动化程度高，无需驾驶员手动操作，能给驾驶员更广的有效视野和更佳的驾驶体验。附图说明

[0018] 图1是本发明一个实施例一种基于多焦距摄像头组的车载机器视觉系统的总体框图；

[0019] 图2是本发明一个实施例一种基于多焦距摄像头组的车载机器视觉系统的图像处理算法流程图；

[0020] 图3是本发明一个实施例的单目长焦摄像头模块视域示意图；

[0021] 图4是本发明一个实施例的双目广角摄像头模块视域示意图；

[0022] 图5是本发明一个实施例的视域剖面示意图；

[0023] 图6是本发明一个实施例的视域顶面示意图。

具体实施方式

[0024] 下面结合附图对本发明的实施方式进行详细描述。

[0025] 本实施例能在识别车辆前方远近不同范围的物体信息，包括物体的3D位置信息及初步分类信息，还可根据算法估计前方道路信息。

[0026] 本实施例是通过以下技术方案来实现的，一种基于多种焦距摄像头的车载机器视觉系统，如图1所示，包括单目长焦摄像头模块、双目广角摄像头模块、图形计算机系统、嵌入式通信单元和汽车控制器及其他模块。单目长焦摄像头模块、双目广角摄像头模块分别与图形计算机系统连接，图形计算机系统依次连接嵌入式通信单元和汽车控制器。

[0027] 而且，双目广角摄像头模块使用相对位置固定并标定完成的两个完全相同的摄像头。其视域如图4所示：其镜头为广角镜头，感光范围应足够大，使车载机器视觉系统在近处的观测不能存在死角，所摄清晰的距离适中，由双目广角摄像头模块所摄两幅对应的图像可经计算得到视差图及距离深度图，并可得到物体与摄像头之间的距离即方位信息。

[0028] 而且，单目长焦摄像头模块其视域如图3所示：其镜头为长焦镜头，感光角度适当，但其所摄距离应足够远，使得车载机器视觉系统在远处有对向来车等事件时有充分的时间做出反应。

[0029] 而且，图形计算机系统包括计算机、图形计算单元、各种通信接口等。其工作原理为：由通信接口导入单目长焦摄像头模块和双目广角摄像头模块图像，再用图形计算单元计算得到距离深度图像算法和目标检测算法，再通过通信接口输出结果给嵌入式通信单元。

[0030] 而且，嵌入式通信单元包括嵌入式控制器与CAN收发器，它接收图形计算机系统的计算结果，并将计算结果发送给汽车控制器模块等其他决策与执行单元。

[0031] 而且，汽车控制器模块可以是车载计算机系统的主控单元，也可以是其他模块，如自动驾驶控制器、汽车前大灯以及报警系统等。

[0032] 并且，车载机器视觉系统视域剖面图如图5所示，视域顶面图如图6所示。长焦镜头的视域最好位于车载机器视觉系统视域中间偏左位置，可有效针对对向来车进行图像识别。

[0033] 一种基于多种焦距摄像头的车载机器视觉系统的软件流程图，如图2所示，实现方法包括如下步骤：

[0034] 步骤一、读取双目广角摄像头模块图像数据并进行处理，粗测车辆前方是否存在物体。

[0035] 步骤二、若存在物体，则通过双目图像距离算法计算物体的距离，若物体距离较近则直接输出物体的方位与距离。

[0036] 步骤三、若物体在远处，且在长焦镜头感应区内，则通过长焦高清图像进行目标检测，并输出物体具体信息。

[0037] 步骤四、根据单目长焦摄像头模块图像数据，估计前方道路信息(如弯道，上下坡等)，并输出该信息。

[0038] 具体实施时，一种基于不同焦距摄像头组的车载机器视觉系统，系统供电方面可以利用汽车自带蓄电池转接逆变器给车载机器视觉系统单独供电，同时额定输出电流应不小于2A。由双目广角摄像头模块观测近处目标，其观测角度大，还可以由双目图像测距算法探知与近处物体的距离。单目长焦摄像头模块则负责观测对向来车等远距离目标，并识别其类别及位置信息，同时可用于估计前方较远处的道路信息。该车载机器视觉系统能够在复杂道路环境下，既采集车前方近距离目标信息，如行人，前方障碍物等的同时，又采集车前方远距离的目标信息，如对向来车等。同时提出了使用该系统完成上述功能的图像处理算法。

[0039] 图形计算机系统，可以通过PC机或云端两种方式实现，若使用PC系统则需附带高性能GPU单元，若使用云端计算技术，则最好采用5G移动网络传输数据。

[0040] 双目广角摄像头模块的摄像头可以使用覆盖角度120-150度，探测距离为20-30米的广角镜头。双目广角摄像头模块探测角度大，优选焦距小于3mm的广角镜头。且可根据算法测定物体与镜头的距离，其视域范围如图3、5、6所示。

[0041] 单目长焦摄像头模块的摄像头可以使用覆盖角度15-20度，探测距离为75-150米的超长焦像头。单目长焦摄像头模块的观测距离应足够大，优选焦距大于8mm的长焦镜头，其视域范围如图4、5、6所示。

[0042] 在上电时自动启动完成车载机器视觉系统，并完成初始化工作。该系统通过安装在汽车上的单目长焦摄像头模块及双目广角摄像头模块获取前方图像信息，并传输给图形计算机系统。

[0043] 使用覆盖角度为15度的长焦镜头，以汽车正前方为分界线，左边探测角度为10度，右侧为5度。

[0044] 使用双目立体匹配(Stereo Matching)算法，对双目广角摄像头模块获取的图像进行处理，得到汽车近前方行人与障碍物的方位及距离信息。

[0045] 使用YOLO算法，对单目长焦摄像头模块获取的图像进行目标检测，以得到汽车远前方道路及物体信息。

[0046] 通过CAN总线将检测结果发送到汽车控制器，可由其决定是否执行告警提示，紧急刹车等操作，同时汽车其他模块也可以使用该信息，比如通过预存的汽车前照灯控制算法控制汽车前照灯进行上、下、左、右偏转，或开启、关闭汽车前照灯等。

[0047] 应当理解的是，本说明书未详细阐述的部分均属于现有技术。

[0048] 虽然以上结合附图描述了本发明的具体实施方式，但是本领域普通技术人员应当理解，这些仅是举例说明，可以对这些实施方式做出多种变形或修改，而不背离本发明的原理和实质。本发明的范围仅由所附权利要求书限定。

标题	发布/更新时间	阅读量
一种基于激光技术的钢卷识别定位方法	2020-05-11	210
一种混凝土结构表面及内部损伤精细建模方法	2020-05-11	941
提高电路板生产效率的方法及系统	2020-05-12	184
一种毫米波通信系统中智能波束训练方法及预编码系统	2020-05-12	986
一种室内冷血动物培养的热成像精密恒温空调及控制方法	2020-05-13	901
一种伤口测量的方法及装置、存储介质	2020-05-08	414
用于生成分子功能谱、对其进行可视化和分类的系统和方法	2020-05-08	876
图像识别方法、识别装置、终端设备及可读存储介质	2020-05-12	522
一种GPU图像处理卷积过滤的实现方法	2020-05-11	994
患者治疗系统和方法	2020-05-12	956

一种基于多焦距摄像头组的车载机器视觉系统及实现方法

一种基于多焦距摄像头组的车载机器视觉系统及实现方法

技术领域

背景技术

发明内容

具体实施方式

该功能需要专业版企业版VIP权限，您可以：