基于机器学习的机械运动识别方法及系统专利检索-算法电脑编程专利检索查询-专利查询网

基于 机器学习的机械运动识别方法及系统

阅读：758发布：2021-06-04

专利汇可以提供基于机器学习的机械运动识别方法及系统专利检索，专利查询，专利分析的服务。并且本发明涉及一种基于机器学习的机械运动识别方法及系统，其中，机械运动识别方法包括：获取车间视频监测系统的视频数据采集；对视频数据进行工位核对，编码视频监控机位及目标设备工位；获取运动区域的运动部件类型；获取指定运动部件的运动轨迹特征参数；利用已有的典型识别样本，判断运动轨迹类型；根据运动轨迹的特征参数对运动轨迹进行统计分类，用于指定时间的统计进料物品数量、设备机械运动工作状况、出料物品数量。本发明实现了实时监控预测工业设备的工作状态的目的，进而可在第一时间发现工业设备的异常苗头，及时报警，杜绝事故的发生。，下面是基于机器学习的机械运动识别方法及系统专利的具体信息内容。

权利要求

1.一种基于机器学习的机械运动识别方法，其特征在于，包括步骤：
S1，对车间机械设备及工况进行视频数据采集，并对采集的视频数据进行标识、切割成指定时间片段视频数据；
S2，对视频数据的标识进行工位核对，根据视频采集点与目标设备工位的配置关系，编码视频指定时间片段的监控机位及目标设备工位；
S3，将编码后的视频指定时间片段数据按照时间线进行运动区域识别，标识视频中的运动区域，并切割成局部运动的视频数据；
S4，对切割后的局部运动视频数据按照指定时间间隔抽取运动区域特征参数；
S5，根据抽取的运动区域特征参数，利用已有典型识别样本的运动部件特征参数集，判断运动区域内的运动部件类型；
S6，根据局部运动视频数据，对局部运动视频数据进行特征提取，获取运动轨迹特征参数；
S7，根据指定部件的运动轨迹特征参数，并利用已有的典型识别样本的运动轨迹特征参数集，获取指定部件的运动轨迹类型参数；
S8，对指定部件的运动轨迹类型参数进行状态监测并统计分类，进而获得在指定时间的进料物品数量、设备机械运动工作状况和/或出料物品数量。
2.如权利要求1所述的基于机器学习的机械运动识别方法，其特征在于：S4中抽取运动区域特征参数是基于抽取运动特征的静态图片，根据抽取的运动特征的静态图片，对图片进行特征提取，进而获取运动区域特征参数。
3.如权利要求2所述的基于机器学习的机械运动识别方法，其特征在于：对图片进行特征提取是基于LSTM的识别算法和光流特征。
4.如权利要求1所述的基于机器学习的机械运动识别方法，其特征在于：S6中对局部运动视频数据进行特征提取是基于对局部运动视频数据进行三维卷积算法获得的。
5.如权利要求1所述的基于机器学习的机械运动识别方法，其特征在于：S5中设备已有的典型识别样本的运动部件特征参数集包括可判断其运动部件类别的运动部件识别特征的参数库。
6.如权利要求1所述的基于机器学习的机械运动识别方法，其特征在于：S7中设备已有的典型识别样本的运动轨迹特征参数集包括可判断其运动轨迹类型特征的参数库。
7.如权利要求6所述的基于机器学习的机械运动识别方法，其特征在于：通过可判断其运动轨迹类型特征的参数库来判断运动部件的运动轨迹的方法还包括在参数库内采用决策树算法，预测设备运行工况，再使用工时统计，与生产工单的目标产值匹配，预测工单异常事件；建立设备运动模型，分析设备运行效率。
8.一种基于机械学习的机械运动识别系统，其特征在于，包括：
数据采集单元，用于对车间内的机械设备及工况进行视频数据采集，并对采集的视频数据进行标识、切割成指定时间片段视频数据；
运动区域识别单元，用于对采集的指定时间片段视频数据按照时间线进行运动区域的识别，并抽取运动区域特征参数；
运动部件识别单元，用于根据识别样本的运动部件特征参数集，判断运动区域内的运动部件类型，并获取运动部件在运动区域的运动视频数据；
运动轨迹识别单元，用于对运动视频数据进行特征提取，获取运动轨迹特征参数，再根据已有的典型识别样本的运动轨迹特征参数集，获取指定部件的运动轨迹类型参数；
运动轨迹输出单元，用于对指定部件的运动轨迹类型参数进行状态监测并统计分类，进而获得在指定时间的进料物品数量、设备机械运动工作状况和/或出料物品数量。

说明书全文

基于机器学习的机械运动识别方法及系统

技术领域

[0001] 本发明涉及电子信息技术领域，特别是涉及一种基于机器学习的机械运动识别方法及系统。

背景技术

[0002] 我国目前存在大量的中小型制造企业，设备自动化和数字化水平较低，无法满足企业生产信息化管理的要求，对生产作业中的工况信息也依赖于人工判断，对企业生产效率、良品率的提升和生产成本的降低造成了很大阻碍。

[0003] 例如在中小型轴承制造行业，其生产需要经过锻造、车加工、热处理、磨加工、装配等多个工艺流程，需要用到大量专用设备,同时产品又具有精度要求较高、少品种大批量的特点，因此对生产过程的管理要求也很高。

[0004] 传统的生产车间数字化、自动化改造成本高，工况信息也需要通过昂贵的数控设备接口信息化改造来实现系统化监控，对企业造成了很大的成本压力。同时传统的监控设备依赖人工判定生产过程的视频信息，存在信息监控不及时、准确率不高等问题。

发明内容

[0005] 针对车间的哑设备、半自动化设备不能及时提供生产作业工况信息，如开机、停机、空载、进料情况、出料情况等，提出一种基于机器学习的机械运动识别方法及系统，通过识别设备运行工况，导入到车间信息管理系统，进而对设备进行非接触式空中诊断，及时发现设备异常工况并实时报警或预警。

[0006] 为了实现上述目的，本发明技术方案为：

[0007] 一种基于机器学习的机械运动识别方法，其特征在于，包括步骤：

[0008] S1，对车间机械设备及工况进行视频数据采集，并对采集的视频数据进行标识、切割成指定时间片段视频数据；

[0009] S2，对视频数据的标识进行工位核对，根据视频采集点与目标设备工位的配置关系，编码视频指定时间片段的监控机位及目标设备工位；

[0010] S3，将编码后的视频指定时间片段数据按照时间线进行运动区域识别，标识视频中的运动区域，并切割成局部运动的视频数据；

[0011] S4，对切割后的局部运动视频数据按照指定时间间隔抽取运动区域特征参数；

[0012] S5，根据抽取的运动区域特征参数，利用已有典型识别样本的运动部件特征参数集，判断运动区域内的运动部件类型；

[0013] S6，根据局部运动视频数据，对局部运动视频数据进行特征提取，获取运动轨迹特征参数；

[0014] S7，根据指定部件的运动轨迹特征参数，并利用已有的典型识别样本的运动轨迹特征参数集，获取指定部件的运动轨迹类型参数；

[0015] S8，对指定部件的运动轨迹类型参数进行状态监测并统计分类，进而获得在指定时间的进料物品数量、设备机械运动工作状况和/或出料物品数量。

[0016] 进一步地，S4中抽取运动区域特征参数是基于抽取运动特征的静态图片，根据抽取的运动特征的静态图片，对图片进行特征提取，进而获取运动区域特征参数。

[0017] 更进一步地，对图片进行特征提取是基于LSTM的识别算法和光流特征。

[0018] 进一步地，S6中对局部运动视频数据进行特征提取是基于对局部运动视频数据进行三维卷积算法获得的。

[0019] 进一步地，S5中设备已有的典型识别样本的运动部件特征参数集包括可判断其运动部件类别的运动部件识别特征的参数库。

[0020] 进一步地，S7中设备已有的典型识别样本的运动轨迹特征参数集包括可判断其运动轨迹类型特征的参数库。

[0021] 更进一步地，通过可判断其运动轨迹类型特征的参数库来判断运动部件的运动轨迹的方法还包括在参数库内采用决策树算法，预测设备运行工况，再使用工时统计，与生产工单的目标产值匹配，预测工单异常事件；建立设备运动模型，分析设备运行效率。

[0022] 一种基于机器学习的机械运动识别系统，其特征在于，包括：

[0023] 数据采集单元，用于对车间内的机械设备及工况进行视频数据采集，并对采集的视频数据进行标识、切割成指定时间片段视频数据；

[0024] 运动区域识别单元，用于对采集的指定时间片段视频数据按照时间线进行运动区域的识别，并抽取运动区域特征参数；

[0025] 运动部件识别单元，用于根据识别样本的运动部件特征参数集，判断运动区域内的运动部件类型，并获取运动部件在运动区域的运动视频数据；

[0026] 运动轨迹识别单元，用于对运动视频数据进行特征提取，获取运动轨迹特征参数，再根据已有的典型识别样本的运动轨迹特征参数集，获取指定部件的运动轨迹类型参数；

[0027] 运动轨迹输出单元，用于对指定部件的运动轨迹类型参数进行状态监测并统计分类，进而获得在指定时间的进料物品数量、设备机械运动工作状况和/或出料物品数量。

[0028] 上述技术方案具有如下有益效果：本发明从监测运动区域的视频数据，再到监测运动区域的运动部件，最后获取指定运动部件在运动区域内的运动轨迹，实现了实时监控预测工业设备的工作状态的目的，进而可在第一时间发现工业设备的异常苗头，及时报警，杜绝事故的发生；另外，本方案实时获取工业设备的监控视频数据，结合了工业生产管理控制数据、使用区域环境数据，从多角度评估工业生产的高效可控性，使生产管理更加精细。附图说明

[0029] 图1为本发明方法流程图。

具体实施方式

[0030] 为了便于理解本发明，下面将参照相关附图对本发明进行更全面的描述。附图中给出了本发明的首选实施例。但是，本发明可以以许多不同的形式来实现，并不限于本文所描述的实施例。相反地，提供这些实施例的目的是使对本发明的公开内容更加透彻全面。

[0031] 除非另有定义，本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的，不是旨在于限制本发明。本文所使用的术语“及/或”包括一个或多个相关的所列项目的任意的和所有的组合。

[0032] 如图1所示，一种基于机器学习的机械运动识别方法，包括步骤：

[0033] S1，对车间机械设备及工况进行视频数据采集，并对采集的视频数据进行标识、切割成指定时间片段视频数据，采集的数据包括设备开工、预热、打样生产、正式生产、待机、停机等监控视频数据，同时采集该设备工位信息、点检记录、巡检记录、生产订单、质检记录等；

[0034] S2，对视频数据的标识进行工位核对，根据视频采集点与目标设备工位的配置关系，编码视频指定时间片段的监控机位及目标设备工位；

[0035] S3，将编码后的视频指定时间片段数据按照时间线进行运动区域识别，标识视频中的运动区域，并切割成局部运动的视频数据；

[0036] S4，对切割后的局部运动视频数据按照指定时间间隔抽取运动区域特征参数，其中，抽取运动区域特征参数是基于抽取运动特征的静态图片，根据抽取的运动特征的静态图片，对图片进行特征提取，进而获取运动区域特征参数，对图片进行特征提取是基于LSTM的识别算法，加入光流特征，获取运动参数特征的。

[0037] S5，根据抽取的运动区域特征参数，利用已有典型识别样本的运动部件特征参数集，判断运动区域内的运动部件类型，并标记运动部件，其中，判断的方法是采用深度神经网络卷积算法，对切割后的运动区域视频数据进行识别，对比运动部件类型标记库，识别出设备运动部件类型，另外，已有典型识别样本的运动部件特征参数集包括可判断其运动部件类别的运动部件识别特征的参数库，主要是针对其典型工况的运动部件特征，获取指定的参数，并将这些参数进行分类，按照特征进行有序排列组合获得；

[0038] S6，根据局部运动视频数据，并根据S5的判断结果标识视频数据的运动部件编码，根据编码后的局部运动视频数据，使用三维卷积算法，对局部运动视频数据进行特征提取，获取运动轨迹特征参数；

[0039] S7，根据指定部件的运动轨迹特征参数，并利用已有的典型识别样本的运动轨迹特征参数集，结合深度神经网络卷积算法，对运动区域视频数据进行识别、对比运动轨迹标记库，获取指定部件的运动轨迹类型参数，具体而言，包括在参数库内采用决策树算法，预测设备运行工况，再使用工时统计，与生产工单的目标产值匹配，预测工单异常事件；建立设备运动模型，分析设备运行效率，其中，已有的典型识别样本的运动轨迹特征参数集包括可判断其运动轨迹类型特征的参数库，主要是针对其典型工况的运动轨迹特征，获取指定的参数，并将这些参数进行分类，按照特征进行有序排列组合；

[0040] S8，对指定部件的运动轨迹类型参数进行状态监测并统计分类，进而获得在指定时间的进料物品数量、设备机械运动工作状况和/或出料物品数量。

[0041] 本方法可以应用于普通常规机械设备、部件生产车间，也特别适合用于本背景技术中提到的轴承生产车间，监测轴承的生产状况。

[0042] 下面列举一个实现上述方法的机械运动识别系统，以下的机械运动识别系统可用于轴承生产监控方面，具体包括：

[0043] 数据采集单元，用于对车间内的机械设备及工况进行视频数据采集，并对采集的视频数据进行标识、切割成指定时间片段视频数据；

[0044] 运动区域识别单元，用于对采集的指定时间片段视频数据按照时间线进行运动区域的识别，并抽取运动区域特征参数；

[0045] 运动部件识别单元，用于根据识别样本的运动部件特征参数集，判断运动区域内的运动部件类型，并获取运动部件在运动区域的局部运动视频数据；

[0046] 运动轨迹识别单元，用于对运动视频数据进行特征提取，获取运动轨迹特征参数，再根据已有的典型识别样本的运动轨迹特征参数集，获取指定部件的运动轨迹类型参数；

[0047] 运动轨迹输出单元，用于对指定部件的局部运动轨迹类型参数进行状态监测并统计分类，进而获得在指定时间的进料物品数量、设备机械运动工作状况和/或出料物品数量。

[0048] 需要说明的是，数据采集单元可采用移动相机或多个相机组成的摄像系统。

[0049] 运动区域识别单元、运动部件识别单元、运动轨迹识别单元和运动轨迹输出单元(简称处理系统)及/或实现的方法可基于具备AI功能的终端或者固定终端中，所述的终端并不限定于个人电脑、智能手机、平板电脑、安装有摄像头的台式机或一体机等。或由终端和通过网络与所述终端进行连接的服务器所构成的硬件环境中。网络包括但不限于：广域网、城域网或局域网，本实施例的机械运动识别方法可以由服务器来执行，也可以由终端来执行，还可以是由服务器和终端共同执行。

[0050] 例如，对于需要进行机械运动AI识别处理终端，可以直接在终端上集成本实施例方法或/和处理系统所提供的机械运动AI识别处理功能，或者安装用于实现本实施例的方法或/和处理系统的客户端。再如，本实施例所提供的方法或/和处理系统还可以软件开发工具包(Software Development Kit，SDK)的形式运行在服务器等设备上，以SDK的形式提供机械运动AI识别处理功能的接口，终端或其他设备通过所提供的接口即可实现机械运动AI识别处理功能。

[0051] 具体而言，数据采集单元采集的数据是要上传到AI云平台，由AI云平台对采集的视频数据进行运动区域识别、运动部件识别、运动轨迹识别和运动轨迹输出及获得在指定时间的进料物品数量、设备机械运动工作状况和/或出料物品数量。

[0052] 以上所属实施例仅表达了本发明的集中实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制，应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此本发明专利的保护范围应以所附权利要求为准。

标题	发布/更新时间	阅读量
一种用于视频压缩的预测方法	2020-05-08	126
以时序和加密为基础的分布链式数据共享授权方法	2020-05-11	909
用于确定数字资产交易所的偿付能力的方法、系统和计算机程序产品	2020-05-08	778
带宽压缩中的后选择预测方法	2020-05-08	722
一种视频会议加密方法	2020-05-08	912
一种通讯模组网络运营商自动切换的方法	2020-05-08	956
用于智能客服的外呼预测方法及装置	2020-05-08	228
直播间弹幕显示方法、存储介质、设备及系统	2020-05-08	690
一种联网设备边缘计算节点改造方法和系统	2020-05-11	600
一种VNF实例化方法、装置、设备及存储介质	2020-05-11	461

基于机器学习的机械运动识别方法及系统

基于机器学习的机械运动识别方法及系统

技术领域

背景技术

发明内容

具体实施方式

该功能需要专业版企业版VIP权限，您可以：