技术领域
[0001] 本公开涉及
机器视觉、增强现实、
图像处理、工业检测技术领域，具体涉及一种基于增强现实的机械组件质检方法及系统。
背景技术
[0002] 目前，在新兴市场经济和新型技术不断崛起的背景下，生产出高品质且价格低廉的产品是企业发展的急切需求，然而近些年来在国内现有生产条件下生产出的产品存在着很大的问题。传统意义上的生产需要设备处于时常工作状态以便于随时检测，然而这样的工作方式导致了设备在一定的时间内出现设备闲置的现象，大大的浪费了生产资源并无法实现可靠的自动化生产；还有一个更为重要的原因在于工业生产线上生产出的产品，对于其尺寸
精度的测量人们大多数都通过自己的主观意识或者粗浅的测试方法去判别零部件尺寸是否合格，这样的判断方式检测出的精度根本满足不了客户的需求。
发明内容
[0003] 本公开提供一种基于增强现实的机械组件质检方法及系统，本公开主要用于工业机械组件质检，工业机械组件包括但不限于机械设备、机械设备零组件、金属材料、塑料材料；利用
深度相机完成
图像采集，机器视觉技术完成尺寸、裂纹等检测，并使用增强现实技术对检测结果直接投影出来。让测试人员能更直观的获得测量结果。测试过程，测试人员只需佩戴AR眼镜，打开系统，开启摄像头进行实时图像采集，可以及时的完成测量。
[0004] 为了实现上述目的，根据本公开的一方面，提供一种基于增强现实的机械组件质检方法，所述方法包括以下步骤：
[0005] S100：通过深度相机采集机械组件的
深度图像；
[0006] S200：采用高斯滤波函数对深度图像进行滤波处理得到滤波图像；
[0007] S300：通过PCA
算法进行滤波图像
降维得到降维图像；
[0008] S400：通过Canny算法对降维图像进行边缘提取
边缘图像；
[0009] S500：通过Hough变换和亚
像素级
角点检测算法提取边缘图像中的被测目标的几何量参数；
[0010] S600：通过
卷积神经网络训练学习几何量参数中的特定裂纹的特征，最终输出几何量参数是裂纹的概率；
[0011] S700：将几何量参数是裂纹的概率大于裂纹概率
阈值在AR眼镜端显示裂纹
位置和标记。
[0012] 进一步地，在S300中，所述PCA算法还可以是LDA算法、LLE算法、Laplacian Eigenmaps算法任意一种。
[0013] 进一步地，在S500中，所述被测目标的几何量参数包括机械组件的任意两点之间的距离、任意直线的长度、任意两直线的夹角以及圆和圆弧的半径、圆心坐标、弧度等参数；而能否准确获取被测目标边缘直接影响几何参数计算的最终结果。
[0014] 进一步地，在S500中，Hough变换用于将边缘图像中的曲线包括直线，变换到参数空间中，通过检测参数空间中的极值点，确定出该曲线的描述参数，从而提取影像中的规则曲线；用于检测图像中直线、圆、抛物线、椭圆等形状能够用一定函数关系描述的曲线。
[0015] 进一步地，在S500中，亚像素级角点检测算法包括最小二乘拟合回归亚像素
定位算法。
[0016] 进一步地，在S600中，特定裂纹的特征为几何量参数中任意直线的长度、任意两直线的夹角、圆和圆弧的半径参数分别小于直线长度预设阈值、两直线的夹角阈值、圆和圆弧的半径阈值的则判定为特定裂纹的特征，直线长度预设阈值为10毫米、两直线的夹角阈值20°、圆和圆弧的半径阈值5毫米，这些参数均可调整。
[0017] 进一步地，在S700中，裂纹概率阈值的默认设置为80％，可人工调整。
[0018] 本公开还提供了一种基于增强现实的机械组件质检系统，所述系统包括：
存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的
计算机程序，所述处理器执行所述计算机程序运行在以下系统的单元中：
[0019] 深度图像采集单元，用于通过深度相机采集机械组件的深度图像；
[0020] 图像滤波单元，用于采用高斯滤波函数对深度图像进行滤波处理得到滤波图像；
[0021] 图像降维单元，用于通过PCA算法进行滤波图像降维得到降维图像；
[0022] 边缘提取单元，用于通过Canny算法对降维图像进行边缘提取边缘图像；
[0023] 几何量参数提取单元，用于通过Hough变换和亚像素级角点检测算法提取边缘图像中的被测目标的几何量参数；
[0024] 特征训练单元，用于通过卷积神经网络训练学习几何量参数中的特定裂纹的特征，最终输出几何量参数是裂纹的概率；
[0025] AR显示单元，用于将几何量参数是裂纹的概率大于裂纹概率阈值在AR眼镜端显示裂纹位置和标记。
[0026] 本公开的有益效果为：本公开提供一种基于增强现实的机械组件质检方法及系统，该方法为生产加工业实现自动化、智能化的
质量检测提供了更便捷的方法；基于增强现实技术，使用者可佩戴AR设备实时的随时进行快速的定位机械组件的质量
缺陷、机械组件的质量缺陷的质量测量任务包括长度、直径、半径、弯曲度、扭曲度、裂纹等，不受空间位置制约，
视野所见皆可测量；可以调用与实物大小一致的虚拟模型进行对比；可以调用立体的装配体三视图与实物进行对比。
附图说明
[0027] 通过对结合附图所示出的实施方式进行详细说明，本公开的上述以及其他特征将更加明显，本公开附图中相同的参考标号表示相同或相似的元素，显而易见地，下面描述中的附图仅仅是本公开的一些
实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图，在附图中：
[0028] 图1所示为一种基于增强现实的机械组件质检方法的
流程图；
[0029] 图2所示为一种基于增强现实的机械组件质检系统结构图。
具体实施方式
[0030] 以下将结合实施例和附图对本公开的构思、具体结构及产生的技术效果进行清楚、完整的描述，以充分地理解本公开的目的、方案和效果。需要说明的是，在不冲突的情况下，本
申请中的实施例及实施例中的特征可以相互组合。
[0031] 如图1所示为根据本公开的一种基于增强现实的机械组件质检方法的流程图，下面结合图1来阐述根据本公开的实施方式的一种基于增强现实的机械组件质检方法。
[0032] 本公开提出一种基于增强现实的机械组件质检方法，具体包括以下步骤：
[0033] S100：通过深度相机采集机械组件的深度图像；
[0034] S200：采用高斯滤波函数对深度图像进行滤波处理得到滤波图像；
[0035] S300：通过PCA算法进行滤波图像降维得到降维图像；
[0036] S400：通过Canny算法对降维图像进行边缘提取边缘图像；
[0037] S500：通过Hough变换和亚像素级角点检测算法提取边缘图像中的被测目标的几何量参数；
[0038] S600：通过卷积神经网络训练学习几何量参数中的特定裂纹的特征，最终输出几何量参数是裂纹的概率；
[0039] S700：将几何量参数是裂纹的概率大于裂纹概率阈值在AR眼镜端显示裂纹位置和标记。
[0040] 进一步地，在S300中，所述PCA算法还可以是LDA算法、LLE算法、Laplacian Eigenmaps算法任意一种。
[0041] 进一步地，在S500中，所述被测目标的几何量参数包括机械组件的任意两点之间的距离、任意直线的长度、任意两直线的夹角以及圆和圆弧的半径、圆心坐标、弧度等参数；而能否准确获取被测目标边缘直接影响几何参数计算的最终结果。
[0042] 进一步地，在S500中，Hough变换用于将边缘图像中的曲线包括直线，变换到参数空间中，通过检测参数空间中的极值点，确定出该曲线的描述参数，从而提取影像中的规则曲线；用于检测图像中直线、圆、抛物线、椭圆等形状能够用一定函数关系描述的曲线。
[0043] 进一步地，在S500中，亚像素级角点检测算法包括最小二乘拟合回归亚像素定位算法。
[0044] 进一步地，在S600中，特定裂纹的特征为几何量参数中任意直线的长度、任意两直线的夹角、圆和圆弧的半径参数分别小于直线长度预设阈值、两直线的夹角阈值、圆和圆弧的半径阈值的则判定为特定裂纹的特征，直线长度预设阈值为10毫米、两直线的夹角阈值20°、圆和圆弧的半径阈值5毫米，这些参数均可调整。
[0045] 进一步地，在S700中，裂纹概率阈值的默认设置为80％，可人工调整。
[0046] 本公开的实施例提供的一种基于增强现实的机械组件质检系统，如图2所示为本公开的一种基于增强现实的机械组件质检系统结构图，该实施例的一种基于增强现实的机械组件质检系统包括：处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述一种基于增强现实的机械组件质检系统实施例中的步骤。
[0047] 所述系统包括：存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序运行在以下系统的单元中：
[0048] 深度图像采集单元，用于通过深度相机采集机械组件的深度图像；
[0049] 图像滤波单元，用于采用高斯滤波函数对深度图像进行滤波处理得到滤波图像；
[0050] 图像降维单元，用于通过PCA算法进行滤波图像降维得到降维图像；
[0051] 边缘提取单元，用于通过Canny算法对降维图像进行边缘提取边缘图像；
[0052] 几何量参数提取单元，用于通过Hough变换和亚像素级角点检测算法提取边缘图像中的被测目标的几何量参数；
[0053] 特征训练单元，用于通过卷积神经网络训练学习几何量参数中的特定裂纹的特征，最终输出几何量参数是裂纹的概率；
[0054] AR显示单元，用于将几何量参数是裂纹的概率大于裂纹概率阈值在AR眼镜端显示裂纹位置和标记。
[0055] 所述一种基于增强现实的机械组件质检系统可以运行于桌上型计算机、笔记本、掌上电脑及
云端
服务器等计算设备中。所述一种基于增强现实的机械组件质检系统，可运行的系统可包括，但不仅限于，处理器、存储器。本领域技术人员可以理解，所述例子仅仅是一种基于增强现实的机械组件质检系统的示例，并不构成对一种基于增强现实的机械组件质检系统的限定，可以包括比例子更多或更少的部件，或者组合某些部件，或者不同的部件，例如所述一种基于增强现实的机械组件质检系统还可以包括输入输出设备、网络接入设备、总线等。
[0056] 所称处理器可以是中央处理单元(CentralProcessingUnit，CPU)，还可以是其他通用处理器、数字
信号处理器(DigitalSignalProcessor，DSP)、专用集成
电路(ApplicationSpecificIntegratedCircuit，ASIC)、现场可编程
门阵列(Field-ProgrammableGateArray，FPGA)或者其他
可编程逻辑器件、分立门或者晶体管逻辑器件、分立
硬件组件等。通用处理器可以是
微处理器或者该处理器也可以是任何常规的处理器等，所述处理器是所述一种基于增强现实的机械组件质检系统运行系统的控制中心，利用各种
接口和线路连接整个一种基于增强现实的机械组件质检系统可运行系统的各个部分。
[0057] 所述存储器可用于存储所述计算机程序和/或模
块，所述处理器通过运行或执行存储在所述存储器内的计算机程序和/或模块，以及调用存储在存储器内的数据，实现所述一种基于增强现实的机械组件质检系统的各种功能。所述存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储
操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器可以包括高速
随机存取存储器，还可以包括
非易失性存储器，例如
硬盘、内存、插接式硬盘，智能存储卡(SmartMediaCard,SMC)，安全数字(SecureDigital,SD)卡，闪存卡(FlashCard)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
[0058] 尽管本公开的描述已经相当详尽且特别对几个所述实施例进行了描述，但其并非旨在局限于任何这些细节或实施例或任何特殊实施例，而是应当将其视作是通过参考所附
权利要求考虑到
现有技术为这些权利要求提供广义的可能性解释，从而有效地涵盖本公开的预定范围。此外，上文以
发明人可预见的实施例对本公开进行描述，其目的是为了提供有用的描述，而那些目前尚未预见的对本公开的非实质性改动仍可代表本公开的等效改动。
