首页 / 专利库 / 企业组织 / 框图 / 数据处理方法、装置、系统及计算机可读介质

数据处理方法、装置、系统及计算机可读介质

阅读:278发布:2020-06-10

专利汇可以提供数据处理方法、装置、系统及计算机可读介质专利检索,专利查询,专利分析的服务。并且本 发明 提供了一种 数据处理 方法、装置、系统及计算机可读介质,方法应用于包含 图像采集 设备的边缘端,方法包括:获取图像采集设备采集的所在区域内的 视频流 ;提取视频流每个单 帧 图像中的物体特征,得到特征图;对于每个特征图,利用预设分类神经网络确定与特征图对应的单帧图像中每个物体的矩形物体 框图 ;追踪多个单帧图像中的物体,根据多个单帧图像中每个物体的矩形物体框图,确定每个物体的最优图像;发送每个物体的最优图像给 服务器 ,缓解 现有技术 中存在的服务器接收到的图像 质量 低下的技术问题,达到了提高服务器接收到的图像的质量的技术效果。,下面是数据处理方法、装置、系统及计算机可读介质专利的具体信息内容。

1.一种数据处理方法,其特征在于,方法应用于包含图像采集设备的边缘端,所述方法包括:
获取所述图像采集设备采集的所在区域内的视频流
提取所述视频流每个单图像中的物体特征,得到特征图;
对于每个所述特征图,利用预设分类神经网络确定与所述特征图对应的单帧图像中每个物体的矩形物体框图
追踪多个所述单帧图像中的物体,根据多个所述单帧图像中每个物体的所述矩形物体框图,确定每个物体的最优图像;
发送每个物体的所述最优图像给服务器
2.根据权利要求1所述的数据处理方法,其特征在于,所述利用预设分类神经网络确定与所述特征图对应的单帧图像中每个物体的矩形物体框图,包括:
生成与所述预设分类神经网络对应的特征表达函数;
获取所述特征图的每个像素点上的像素值;
对于每个所述像素点,将所述像素值代入所述特征表达函数,得到物体在所述单帧图像中的四点坐标位置
根据所述四点坐标位置生成所述矩形物体框图。
3.根据权利要求2所述的数据处理方法,其特征在于,所述四点坐标位置包括:第一分坐标、第二分坐标、第三分坐标和第四分坐标,其中,所述第一分坐标和所述第二分坐标在同一平线上,所述第三分坐标和所述第四分坐标在同一水平线上,所述第一分坐标和所述第三分坐标在同一垂直线上,所述第二分坐标和所述第四分坐标在同一垂直线上,所述根据所述四点坐标位置生成所述矩形物体框图,包括:
将所述第一分坐标上的点分别与所述第二分坐标上的点和所述第三分坐标上的点连接;
将所述第四分坐标的点分别与所述第二分坐标上的点和所述第三分坐标上的点连接;
得到所述矩形物体框图。
4.根据权利要求1所述的数据处理方法,其特征在于,所述追踪多个所述单帧图像中的物体,根据多个所述单帧图像中每个物体的所述矩形物体框图,确定每个物体的最优图像,包括:
在任意相邻的两个所述单帧图像中,为不同所述单帧图像中的同一个物体设置相同的编号;
在多个所述单帧图像中分别提取具有相同编号的物体的所述矩形物体框图,得到与所述编号对应的矩形物体框图集合;
针对每个所述矩形物体框图集合,对所述矩形物体框图集合中的矩形物体框图进行质量评估,得到满足预设质量要求的所述最优图像。
5.根据权利要求4所述的数据处理方法,其特征在于,所述在任意相邻的两个所述单帧图像中,为不同所述单帧图像中的同一个物体设置相同的编号,包括:
在任意相邻的两个所述单帧图像中,对于前一个单帧图像中的每个物体,获取物体的编号和所述矩形物体框图,将获取到的编号确定为第一编号,将获取到的所述矩形物体框图确定为第一矩形物体框图;
对于后一个单帧图像中的每个物体,获取物体的所述矩形物体框图,将获取的所述矩形物体框图确定为第二矩形物体框图;
分别确定所述第一矩形物体框图和多个所述第二矩形物体框图的重叠空间;
判断取值最大的重叠空间是否超过预设重叠阈值
若取值最大的重叠空间超过所述预设重叠阈值,则确定与取值最大的重叠空间对应的第二矩形物体框图为目标矩形物体框图;
将所述第一编号设置为与所述目标矩形物体框图对应的物体的编号。
6.根据权利要求4所述的数据处理方法,其特征在于,所述针对每个所述矩形物体框图集合,对所述矩形物体框图集合中的矩形物体框图进行质量评估,得到满足预设质量要求的所述最优图像,包括:
获取每个所述矩形物体框图的图像尺寸、图像清晰度和图像成像度;
对于每个所述矩形物体框图,将所述图像尺寸乘以预设图像尺寸权重,计算得到图像尺寸分量;
将所述图像清晰度乘以预设图像清晰度权重,计算得到图像清晰度分量;
将所述图像成像角度乘以预设图像成像角度权重,计算得到图像成像角度分量;
将所述图像尺寸分量、所述图像清晰度分量和所述图像成像角度分量相加,计算得到图像质量值;
确定与取值最大的图像质量值对应的矩形物体框图为所述最优图像。
7.根据权利要求4所述的数据处理方法,其特征在于,所述针对每个所述矩形物体框图集合,对所述矩形物体框图集合中的矩形物体框图进行质量评估,得到满足预设质量要求的所述最优图像,包括:
获取每个所述矩形物体框图的图像尺寸、图像清晰度和图像成像角度;
对所述矩形物体框图进行质量评估,选择图像尺寸大于预设图像尺寸阈值、图像清晰度大于预设图像清晰度阈值,且图像成像角度大于预设图像成像角度阈值的矩形物体框图作为最优图像输出,得到满足预设质量要求的所述最优图像。
8.一种数据处理装置,其特征在于,包括:获取模、提取模块、确定模块、追踪模块和发送模块;
所述获取模块,用于获取图像采集设备采集的所在区域内的视频流;
所述提取模块,用于提取所述视频流每个单帧图像中的物体特征,得到特征图;
所述确定模块,用于对于每个所述特征图,利用预设分类神经网络确定与所述特征图对应的单帧图像中每个物体的矩形物体框图;
所述追踪模块,用于追踪多个所述单帧图像中的物体,根据多个所述单帧图像中每个物体的所述矩形物体框图,确定每个物体的最优图像;
所述发送模块,用于发送每个物体的所述最优图像给服务器。
9.一种数据处理系统,其特征在于,包括:服务器和多个应用如权利要求1-7任一所述方法的边缘端,所述服务器分别与多个所述边缘端通信。
10.一种具有处理器可执行的非易失的程序代码的计算机可读介质,其特征在于,所述程序代码使所述处理器执行所述权利要求1-7任一所述方法。

说明书全文

数据处理方法、装置、系统及计算机可读介质

技术领域

[0001] 本发明涉及数据处理技术领域,尤其是涉及一种数据处理方法、装置、系统及计算机可读介质。

背景技术

[0002] 现在图像采集设备无处不在,这些图像采集设备每秒钟产生的视频数据量是非常庞大的。这些视频数据要被发送到服务器。但是,由于存储空间和传输带宽的限制,视频数据在被发送给服务器之前,需要被大量压缩。视频数据被大量压缩以后,会造成视频数据中的图像模糊的问题。因此,导致服务器接收到的图像质量低下的问题。

发明内容

[0003] 有鉴于此,本发明的目的在于提供一种数据处理方法、装置、系统及计算机可读介质,以缓解现有技术中存在的服务器接收到的图像质量低下的技术问题。
[0004] 第一方面,本发明实施例提供了一种数据处理方法,方法应用于包含图像采集设备的边缘端,所述方法包括:
[0005] 获取所述图像采集设备采集的所在区域内的视频流
[0006] 提取所述视频流每个单图像中的物体特征,得到特征图;
[0007] 对于每个所述特征图,利用预设分类神经网络确定与所述特征图对应的单帧图像中每个物体的矩形物体框图
[0008] 追踪多个所述单帧图像中的物体,根据多个所述单帧图像中每个物体的所述矩形物体框图,确定每个物体的最优图像;
[0009] 发送每个物体的所述最优图像给服务器。
[0010] 结合第一方面,本发明实施例提供了第一方面的第一种可能的实施方式,其中,所述利用预设分类神经网络确定与所述特征图对应的单帧图像中每个物体的矩形物体框图,包括:
[0011] 生成与所述预设分类神经网络对应的特征表达函数;
[0012] 获取所述特征图的每个像素点上的像素值;
[0013] 对于每个所述像素点,将所述像素值代入所述特征表达函数,得到物体在所述单帧图像中的四点坐标位置
[0014] 根据所述四点坐标位置生成所述矩形物体框图。
[0015] 结合第一方面,本发明实施例提供了第一方面的第二种可能的实施方式,其中,所述四点坐标位置包括:第一分坐标、第二分坐标、第三分坐标和第四分坐标,其中,所述第一分坐标和所述第二分坐标在同一平线上,所述第三分坐标和所述第四分坐标在同一水平线上,所述第一分坐标和所述第三分坐标在同一垂直线上,所述第二分坐标和所述第四分坐标在同一垂直线上,所述根据所述四点坐标位置生成所述矩形物体框图,包括:
[0016] 将所述第一分坐标上的点分别与所述第二分坐标上的点和所述第三分坐标上的点连接;
[0017] 将所述第四分坐标的点分别与所述第二分坐标上的点和所述第三分坐标上的点连接;
[0018] 得到所述矩形物体框图。
[0019] 结合第一方面,本发明实施例提供了第一方面的第三种可能的实施方式,其中,所述追踪多个所述单帧图像中的物体,根据多个所述单帧图像中每个物体的所述矩形物体框图,确定每个物体的最优图像,包括:
[0020] 在任意相邻的两个所述单帧图像中,为不同所述单帧图像中的同一个物体设置相同的编号;
[0021] 在多个所述单帧图像中分别提取具有相同编号的物体的所述矩形物体框图,得到与所述编号对应的矩形物体框图集合;
[0022] 针对每个所述矩形物体框图集合,对所述矩形物体框图集合中的矩形物体框图进行质量评估,得到满足预设质量要求的所述最优图像。
[0023] 结合第一方面,本发明实施例提供了第一方面的第四种可能的实施方式,其中,所述在任意相邻的两个所述单帧图像中,为不同所述单帧图像中的同一个物体设置相同的编号,包括:
[0024] 在任意相邻的两个所述单帧图像中,对于前一个单帧图像中的每个物体,获取物体的编号和所述矩形物体框图,将获取到的编号确定为第一编号,将获取到的所述矩形物体框图确定为第一矩形物体框图;
[0025] 对于后一个单帧图像中的每个物体,获取物体的所述矩形物体框图,将获取的所述矩形物体框图确定为第二矩形物体框图;
[0026] 分别确定所述第一矩形物体框图和多个所述第二矩形物体框图的重叠空间;
[0027] 判断取值最大的重叠空间是否超过预设重叠阈值
[0028] 若取值最大的重叠空间超过所述预设重叠阈值,则确定与取值最大的重叠空间对应的第二矩形物体框图为目标矩形物体框图;
[0029] 将所述第一编号设置为与所述目标矩形物体框图对应的物体的编号。
[0030] 结合第一方面,本发明实施例提供了第一方面的第五种可能的实施方式,其中,所述针对每个所述矩形物体框图集合,对所述矩形物体框图集合中的矩形物体框图进行质量评估,得到满足预设质量要求的所述最优图像,包括:
[0031] 获取每个所述矩形物体框图的图像尺寸、图像清晰度和图像成像度;
[0032] 对于每个所述矩形物体框图,将所述图像尺寸乘以预设图像尺寸权重,计算得到图像尺寸分量;
[0033] 将所述图像清晰度乘以预设图像清晰度权重,计算得到图像清晰度分量;
[0034] 将所述图像成像角度乘以预设图像成像角度权重,计算得到图像成像角度分量;
[0035] 将所述图像尺寸分量、所述图像清晰度分量和所述图像成像角度分量相加,计算得到图像质量值;
[0036] 确定与取值最大的图像质量值对应的矩形物体框图为所述最优图像。
[0037] 结合第一方面,本发明实施例提供了第一方面的第六种可能的实施方式,其中,所述针对每个所述矩形物体框图集合,对所述矩形物体框图集合中的矩形物体框图进行质量评估,得到满足预设质量要求的所述最优图像,包括:
[0038] 获取每个所述矩形物体框图的图像尺寸、图像清晰度和图像成像角度;
[0039] 对所述矩形物体框图进行质量评估,选择图像尺寸大于预设图像尺寸阈值、图像清晰度大于预设图像清晰度阈值,且图像成像角度大于预设图像成像角度阈值的矩形物体框图作为最优图像输出,得到满足预设质量要求的所述最优图像。
[0040] 第二方面,本发明实施例还提供一种数据处理装置,包括:获取模、提取模块、确定模块、追踪模块和发送模块;
[0041] 所述获取模块,用于获取图像采集设备采集的所在区域内的视频流;
[0042] 所述提取模块,用于提取所述视频流每个单帧图像中的物体特征,得到特征图;
[0043] 所述确定模块,用于对于每个所述特征图,利用预设分类神经网络确定与所述特征图对应的单帧图像中每个物体的矩形物体框图;
[0044] 所述追踪模块,用于追踪多个所述单帧图像中的物体,根据多个所述单帧图像中每个物体的所述矩形物体框图,确定每个物体的最优图像;
[0045] 所述发送模块,用于发送每个物体的所述最优图像给服务器。
[0046] 第三方面,本发明实施例还提供一种数据处理系统,包括:服务器和多个应用如第一方面任一所述方法的边缘端,所述服务器分别与多个所述边缘端通信。
[0047] 第四方面,本发明实施例还提供一种具有处理器可执行的非易失的程序代码的计算机可读介质,所述程序代码使所述处理器执行如第一方面任一所述方法。
[0048] 本发明实施例带来了以下有益效果:本发明实施例提供的数据处理方法应用于包含图像采集设备的边缘端,所述方法包括:获取所述图像采集设备采集的所在区域内的视频流;提取所述视频流每个单帧图像中的物体特征,得到特征图;对于每个所述特征图,利用预设分类神经网络确定与所述特征图对应的单帧图像中每个物体的矩形物体框图;追踪多个所述单帧图像中的物体,根据多个所述单帧图像中每个物体的所述矩形物体框图,确定每个物体的最优图像;发送每个物体的所述最优图像给服务器。
[0049] 所以,边缘端不需要把所有采集到的视频数据进行压缩,然后发送给服务器,只需要把每个物体的最优图像发送给服务器,这样可以避免由于视频数据被大量压缩而导致的图像模糊的问题,进而避免服务器接收到的图像质量低下的问题,因此,缓解了现有技术中存在的服务器接收到的图像质量低下的技术问题,达到了提高服务器接收到的图像的质量的技术效果。
[0050] 本发明的其他特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
[0051] 为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。

附图说明

[0052] 为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0053] 图1为本发明实施例提供的数据处理方法的流程图
[0054] 图2为图1中步骤S104的流程图;
[0055] 图3为本发明实施例提供的数据处理装置的示意框图;
[0056] 图4为本发明实施例提供的数据处理系统的结构示意图。

具体实施方式

[0057] 为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合附图对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
[0058] 目前,图像采集设备无处不在,这些图像采集设备每秒钟产生的视频数据量是非常庞大的。这些视频数据要被发送到服务器。但是,由于存储空间和传输带宽的限制,视频数据在被发送给服务器之前,需要被大量压缩。视频数据被大量压缩以后,会造成视频数据中的图像模糊的问题。因此,导致服务器接收到的图像质量低下的问题,基于此,本发明实施例提供的一种数据处理方法、装置、系统及计算机可读介质,可以缓解现有技术中存在的服务器接收到的图像质量低下的技术问题,达到提高服务器接收到的图像的质量的技术效果。
[0059] 为便于对本实施例进行理解,首先对本发明实施例所公开的一种数据处理方法进行详细介绍,方法应用于包含图像采集设备的边缘端,如图1所示,所述数据处理方法可以包括以下步骤。
[0060] 步骤S101,获取所述图像采集设备采集的所在区域内的视频流。
[0061] 举例说明,图像采集设备可以为高清摄像机和智能摄像机等。
[0062] 步骤S102,提取所述视频流每个单帧图像中的物体特征,得到特征图。
[0063] 本发明实施例中,可以采用多个卷积层的神经网络算法对单帧图像进行物体特征的提取,得到特征图。
[0064] 步骤S103,对于每个所述特征图,利用预设分类神经网络确定与所述特征图对应的单帧图像中每个物体的矩形物体框图。
[0065] 其中,所述利用预设分类神经网络确定与所述特征图对应的单帧图像中每个物体的矩形物体框图,可以包括以下步骤:
[0066] (1)生成与所述预设分类神经网络对应的特征表达函数。
[0067] (2)获取所述特征图的每个像素点上的像素值。
[0068] 示例性的,可以采用滑动窗的方式来获取所述特征图的每个像素点上的像素值。
[0069] (3)对于每个所述像素点,将所述像素值代入所述特征表达函数,得到物体在所述单帧图像中的四点坐标位置。
[0070] 示例性的,四点坐标位置可以包括:第一分坐标、第二分坐标、第三分坐标和第四分坐标,其中,所述第一分坐标和所述第二分坐标在同一水平线上,所述第三分坐标和所述第四分坐标在同一水平线上,所述第一分坐标和所述第三分坐标在同一垂直线上,所述第二分坐标和所述第四分坐标在同一垂直线上。
[0071] (4)根据所述四点坐标位置生成所述矩形物体框图。
[0072] 其中,所述根据所述四点坐标位置生成所述矩形物体框图,可以包括以下步骤:将所述第一分坐标上的点分别与所述第二分坐标上的点和所述第三分坐标上的点连接;将所述第四分坐标的点分别与所述第二分坐标上的点和所述第三分坐标上的点连接;得到所述矩形物体框图。
[0073] 本发明实施例中,对于每个所述特征图,还可以利用预设分类神经网络确定与所述特征图对应的单帧图像中每个物体的物体类别和类别置信度
[0074] 示例性的,物体类别可以为:行人、自行车、两轮摩托车、三轮摩托车、三轮车、小汽车、面包车、卡车、大型客车或者公交车等。预设分类神经网络可以为Faster R-CNN神经网络模型、YOLO(You Only Look Once:Unified,Real-Time Object Detection)、R-FCN神经网络模型或者SSD神经网络模型。
[0075] 步骤S104,追踪多个所述单帧图像中的物体,根据多个所述单帧图像中每个物体的所述矩形物体框图,确定每个物体的最优图像。
[0076] 其中,可以采用光流跟踪算法或者SORT(SIMPLE ONLINE ANDREALTIME TRACKING)算法追踪多个所述单帧图像中的物体。
[0077] 进一步的,如图2所示,步骤S104可以包括以下步骤。
[0078] 步骤S201,在任意相邻的两个所述单帧图像中,为不同所述单帧图像中的同一个物体设置相同的编号。
[0079] 其中,步骤S201可以包括以下步骤:
[0080] (1)在任意相邻的两个所述单帧图像中,对于前一个单帧图像中的每个物体,获取物体的编号和所述矩形物体框图,将获取到的编号确定为第一编号,将获取到的所述矩形物体框图确定为第一矩形物体框图。
[0081] (2)对于后一个单帧图像中的每个物体,获取物体的所述矩形物体框图,将获取的所述矩形物体框图确定为第二矩形物体框图。
[0082] (3)分别确定所述第一矩形物体框图和多个所述第二矩形物体框图的重叠空间。
[0083] (4)判断取值最大的重叠空间是否超过预设重叠阈值。
[0084] 其中,预设重叠阈值可以根据实际业务需求来确定。
[0085] (5)若取值最大的重叠空间超过所述预设重叠阈值,则确定与取值最大的重叠空间对应的第二矩形物体框图为目标矩形物体框图。
[0086] (6)将所述第一编号设置为与所述目标矩形物体框图对应的物体的编号。
[0087] 步骤S202,在多个所述单帧图像中分别提取具有相同编号的物体的所述矩形物体框图,得到与所述编号对应的矩形物体框图集合。
[0088] 步骤S203,针对每个所述矩形物体框图集合,对所述矩形物体框图集合中的矩形物体框图进行质量评估,得到满足预设质量要求的所述最优图像。
[0089] 其中,步骤S203的一种具体实施方式可以为:获取每个所述矩形物体框图的图像尺寸、图像清晰度和图像成像角度;对于每个所述矩形物体框图,将所述图像尺寸乘以预设图像尺寸权重,计算得到图像尺寸分量;将所述图像清晰度乘以预设图像清晰度权重,计算得到图像清晰度分量;将所述图像成像角度乘以预设图像成像角度权重,计算得到图像成像角度分量;将所述图像尺寸分量、所述图像清晰度分量和所述图像成像角度分量相加,计算得到图像质量值;确定与取值最大的图像质量值对应的矩形物体框图为所述最优图像。
[0090] 示例性的,计算图像质量值的公式可以为:Z=x1*ω1+x2*ω2+x3*ω3,其中,Z可以表示图像质量值,x1可以表示图像尺寸,ω1可以表示预设图像尺寸权重,x2可以表示图像清晰度,ω2可以表示预设图像清晰度权重,x3可以表示图像成像角度,ω3可以表示预设图像成像角度权重。每个所述矩形物体框图集合中的每张所述矩形物体框图均可以计算得到图像质量值。
[0091] 值得注意的是,预设图像尺寸权重、预设图像清晰度权重和预设图像成像角度权重不是固定不变的。在不同的场景下,预设图像尺寸权重是不同的,预设图像清晰度权重是不同的,预设图像成像角度权重也是不同的。
[0092] 进一步的,步骤S203的另一种具体实施方式可以为:获取每个所述矩形物体框图的图像尺寸、图像清晰度和图像成像角度;对所述矩形物体框图进行质量评估,选择图像尺寸大于预设图像尺寸阈值、图像清晰度大于预设图像清晰度阈值,且图像成像角度大于预设图像成像角度阈值的矩形物体框图作为最优图像输出,得到满足预设质量要求的所述最优图像。
[0093] 示例性的,可以采用Brenner梯度法、Tenegrad梯度法、laplace梯度法、方差法或者能量梯度法来获取每个所述矩形物体框图的图像清晰度。可以采用VGG分类网络模型、ResNets(Residual Networks,残差网络)、GoogLeNet分类网络模型、MobileNet分类网络模型或者DenseNet分类网络模型来获取每个所述矩形物体框图的图像成像角度。
[0094] 其中,预设图像尺寸阈值、预设图像清晰度阈值和预设图像成像角度阈值均可以根据实际业务需求来确定。
[0095] 本发明实施例中,由于在边缘端中融合了数据采集过程和视频结构化过程,避免在视频结构化过程中使用经过压缩的模糊的图像,所以,能够提高最优图像的质量。当服务器利用最优图像进行物体识别时,可以降低物体识别的误差率,提高物体识别的概率。
[0096] 步骤S105,发送每个物体的所述最优图像给服务器。
[0097] 本发明实施例中,由于边缘端只发送最优图像给服务器,所以可以降低冗余数据的干扰,降低带宽的占用率,降低数据传输的成本,同时提高传输图像的质量,以便服务器利用高质量的最优图像来进行物体识别过程,提高物体识别概率。
[0098] 本发明实施例中,边缘端还可以将每个物体的物体类别、物体编号、最优图像的图像质量值以及最优图像所在的单帧图像的图像帧号发送给服务器。
[0099] 示例性的,边缘端可以采用UDP(User Datagram Protocol,用户数据报协议)将每个物体的所述最优图像、物体类别、物体编号、最优图像的图像质量值以及最优图像所在的单帧图像的图像帧号发送给服务器。
[0100] 除非另外具体说明,否则在这些实施例中阐述的部件和步骤的相对步骤、数字表达式和数值并不限制本发明的范围。
[0101] 本发明实施例中,本发明实施例提供的数据处理方法应用于包含图像采集设备的边缘端,所述方法包括:获取所述图像采集设备采集的所在区域内的视频流;提取所述视频流每个单帧图像中的物体特征,得到特征图;对于每个所述特征图,利用预设分类神经网络确定与所述特征图对应的单帧图像中每个物体的矩形物体框图;追踪多个所述单帧图像中的物体,根据多个所述单帧图像中每个物体的所述矩形物体框图,确定每个物体的最优图像;发送每个物体的所述最优图像给服务器。
[0102] 所以,边缘端不需要把所有采集到的视频数据进行压缩,然后发送给服务器,只需要把每个物体的最优图像发送给服务器,这样既可以满足后续分析的需要,又可以避免由于视频数据被大量压缩而导致的图像模糊的问题,进而避免服务器接收到的图像质量低下的问题,因此,缓解了现有技术中存在的服务器接收到的图像质量低下的技术问题,达到了提高服务器接收到的图像的质量的技术效果。
[0103] 在本发明的又一实施例中,对本发明实施例所公开的一种数据处理装置进行详细介绍,如图3所示,所述数据处理装置可以包括:获取模块31、提取模块32、确定模块33、追踪模块34和发送模块35。
[0104] 所述获取模块31,用于获取图像采集设备采集的所在区域内的视频流。
[0105] 所述提取模块32,用于提取所述视频流每个单帧图像中的物体特征,得到特征图。
[0106] 所述确定模块33,用于对于每个所述特征图,利用预设分类神经网络确定与所述特征图对应的单帧图像中每个物体的矩形物体框图。
[0107] 所述追踪模块34,用于追踪多个所述单帧图像中的物体,根据多个所述单帧图像中每个物体的所述矩形物体框图,确定每个物体的最优图像。
[0108] 所述发送模块35,用于发送每个物体的所述最优图像给服务器。
[0109] 本发明实施例所提供的装置,其实现原理及产生的技术效果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。
[0110] 在本发明的又一实施例中,对本发明实施例所公开的一种数据处理系统进行详细介绍,所述数据处理系统可以包括:服务器和多个应用如上述实施例任一所述方法的边缘端,所述服务器分别与多个所述边缘端通信。
[0111] 示例性的,以所述数据处理系统包括服务器和四个边缘端为例进行说明。如图4所示,所述数据处理系统包括服务器41和四个边缘端,四个边缘端分别为:边缘端42、边缘端43、边缘端44和边缘端45。服务器41分别与边缘端42、边缘端43、边缘端44和边缘端45通信。
[0112] 其中,每个边缘端均可以包含图像采集设备。
[0113] 本发明实施例中,由于每个边缘端只发送最优图像给服务器,降低了冗余数据的干扰,避免由于视频数据被大量压缩而导致的图像模糊的问题,这样不仅能够降低带宽的占用率,而且能够提高图像的质量。同时,还能够提高数据处理系统的整体性能,降低数据处理系统的使用成本,保证系统的灵活性和可扩展性。
[0114] 所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
[0115] 在本发明的又一实施例中,对本发明实施例所公开的一种具有处理器可执行的非易失的程序代码的计算机可读介质进行详细介绍,所述程序代码使所述处理器执行上述实施例任一所述方法。
[0116] 在这里示出和描述的所有示例中,任何具体值应被解释为仅仅是示例性的,而不是作为限制,因此,示例性实施例的其他示例可以具有不同的值。
[0117] 应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
[0118] 附图中的流程图和框图显示了根据本发明的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
[0119] 另外,在本发明实施例的描述中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本发明中的具体含义。
[0120] 在本发明的描述中,需要说明的是,术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。此外,术语“第一”、“第二”、“第三”仅用于描述目的,而不能理解为指示或暗示相对重要性。
[0121] 本发明实施例所提供的进行数据处理方法的计算机程序产品,包括存储了处理器可执行的非易失的程序代码的计算机可读存储介质,所述程序代码包括的指令可用于执行前面方法实施例中所述的方法,具体实现可参见方法实施例,在此不再赘述。
[0122] 所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
[0123] 在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
[0124] 所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
[0125] 另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
[0126] 所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
[0127] 最后应说明的是:以上所述实施例,仅为本发明的具体实施方式,用以说明本发明的技术方案,而非对其限制,本发明的保护范围并不局限于此,尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。
高效检索全球专利

专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。

申请试用

分析报告

专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。

申请试用

QQ群二维码
意见反馈