首页 / 专利库 / 电信 / 硬判决 / 基于毫米波雷达的人体姿态识别系统

基于毫米波雷达的人体姿态识别系统

阅读:335发布:2020-05-08

专利汇可以提供基于毫米波雷达的人体姿态识别系统专利检索,专利查询,专利分析的服务。并且本 发明 属于 模式识别 技术领域,具体为一种基于毫米波雷达的人体 姿态 识别系统。本发明系统包括毫米波雷达子系统、 数据处理 与 跟踪 定位 子系统、 人工智能 分类子系统;毫米波雷达子系统向检测范围内发射线性调频连续波 信号 ,并采集人体反射的雷达回 波数 据,经混频、滤波和 模数转换 采样 后输出中频原始数据;数据处理与跟踪定位子系统从原始数据中提取能够表征人体姿态的多种特征,包括距离、速度、 加速 度、方位特征等,实时跟踪定位人体所在 位置 ;人工智能分类子系统对特征信息进行过滤、分类和判决,综合分类和判决结果确定人体姿态。本发明着眼于现实生活中的人体姿态识别和状态监测,可以适用于家庭、办公室、工厂车间、医院病房、养老院等场景。,下面是基于毫米波雷达的人体姿态识别系统专利的具体信息内容。

1.一种基于毫米波雷达的人体姿态识别系统,其特征在于,包括毫米波雷达子系统、数据处理跟踪定位子系统、人工智能分类子系统;其中,所述毫米波雷达子系统用于向检测范围内发射线性调频连续波LFMCW信号,并采集人体反射的雷达回波数据,经混频、滤波和模数转换ADC采样后输出中频原始数据;所述数据处理与跟踪定位子系统用于从原始数据中提取能够表征人体姿态的多种特征,包括但不限于距离、速度、加速度、方位、高度、能量、统计特征等,同时实时跟踪定位人体所在位置;所述人工智能分类子系统用于对特征信息进行过滤、分类和判决,综合分类和判决结果确定人体姿态;
系统的工作流程为:
人在雷达检测范围内活动,毫米波雷达子系统周期性发射线性调频连续波信号并接收检测范围反馈的回波信号,经过混频、滤波和ADC采样后得到原始数据;
将原始数据送入数据处理与跟踪定位子系统,经过一系列信号处理过程,提取能够表征人体姿态的多种特征,所述特征包括距离、速度、加速度、方位、高度、能量、统计,同时实时跟踪定位人体所在位置;
将特征数据送入人工智能分类子系统中进行过滤、分类和判决,若系统判别为存在人体姿态,则判断是否已确定人体姿态,若是则输出人体姿态,否则送至过滤过程;经过过滤过程过滤后判断能否确定人体姿态,若能则输出人体姿态,否则进入分类过程;经过分类过程分级分类,最终待识别人体姿态只剩下一种或两种可能匹配的人体姿态,若与其中一种的相似度大于相似度阈值则判断为该人体姿态并输出该人体姿态,否则判断为未定义人体姿态并输出。
2.根据权利要求1所述的基于毫米波雷达的人体姿态识别系统,其特征在于,所述人工智能分类子系统的判决过程的具体步骤为:
S101,判断是否存在运动人体,若不存在则继续S101,若存在进入步骤S102;
S102,进行人体姿态判断,若待判断数据与某一人体姿态特征数据的相似度大于第一特征阈值Q1时,则进入步骤S107,否则进入步骤S103;
S103,进入过滤过程,过滤掉一些不可能的人体姿势,进入步骤S104;
S104,进行人体姿态判断,若待判断数据与某一人体姿态特征数据的相似度大于第二特征阈值Q2时,则进入步骤S107,否则进入步骤S105;
S105,进入分类过程,针对某些特征,利用人工神经网络调用预训练的分类模型进行分类,进入步骤S106;
S106,若待识别人体姿态与其中一种人体姿态的相似度超过第三特征阈值Q3,则进入步骤S107,否则判断为未定义人体姿态并进入步骤S108;
S107,将待识别人体姿态判决为某一人体姿态,进入步骤S108;
S108,将判决结果反馈,本次判决结束,返回步骤S101。
3.根据权利要求2所述的基于毫米波雷达的人体姿态识别系统,其特征在于,所述过滤过程的具体步骤为:
S201,依据待识别人体姿态的速度特征信息,判断是否小于速度阈值,若是则进入步骤S202,否则进入步骤S104;
S202,进行一级过滤,若待匹配库中只有三种或三种以下的人体姿态的速度特征值超过待识别人体姿态的速度特征值,则将待匹配库中的速度特征值小于速度阈值的人体姿态滤除并进入步骤S104,否则将待匹配库中的速度特征值大于速度阈值的人体姿态滤除并进入步骤S203;
S203,依据待识别人体姿态的方位特征信息,判断方位变化与极值相似度是否属于方位阈值范围,若是则进入步骤S204,否则进入步骤S104;
S204,进行二级过滤,若待识别人体姿态的方位特征值落在待匹配库中三种或三种以下的人体姿态的方位特征值区间,则将待匹配库中除这几种人体姿态外的其他人体姿态滤除并进入步骤S104,否则将待匹配库中的几种人体姿态滤除并进入步骤S205;
S205,依据待识别人体姿态的加速度特征信息,判断是否小于加速度阈值,若是则进入步骤S206,否则进入步骤S104;
S206,进行三级过滤,若待匹配库中只有三种或三种以下的人体姿态的加速度特征值超过待识别人体姿态的加速度特征值,则将待匹配库中的加速度特征值小于速度阈值的人体姿态滤除并进入步骤S104,否则将待匹配库中的速度特征值大于加速度阈值的人体姿态滤除并进入步骤S207;
S207,依据待识别人体姿态的方位特征信息,判断高度变化与极值相似度是否属于高度阈值范围,若是则进入步骤S208,否则进入步骤S104;
S208,进行四级过滤,若待识别人体姿态的高度特征值落在待匹配库中三种或三种以下的人体姿态的高度特征值区间,则将待匹配库中除这几种人体姿态外的其他人体姿态滤除并进入步骤S104,否则将待匹配库中的几种人体姿态滤除并进入步骤S209;
S209,本次过滤结束,进入步骤S104。
4.根据权利要求3所述的基于毫米波雷达的人体姿态识别系统和方法,其特征在于,所述人工智能分类子系统的分类采用多级人工神经网络分类,在所有人体姿态特征中选取几种作为分类特征,分级分类进行判断,每一级分类都把相似度低于分类相似度阈值的人体姿态从匹配库中剔除,每经过一级分类,待识别人体姿态的可能范围就越小,越容易确定;
分类过程的具体步骤为:
S301,进行一级分类,若匹配库中与待识别人体姿态的相似度高于一级相似度阈值的人体姿态只有一种或两种,则进入步骤S106,否则将匹配库中与待识别人体姿态的相似度低于一级相似度阈值的人体姿态剔除并进入步骤S302;
S302,进行二级分类,若匹配库中与待识别人体姿态的相似度高于二级相似度阈值的人体姿态只有一种或两种,则进入步骤S106,否则将匹配库中与待识别人体姿态的相似度低于二级相似度阈值的人体姿态剔除并进入步骤S303;
S303,进行三级分类,若匹配库中与待识别人体姿态的相似度高于三级相似度阈值的人体姿态只有一种或两种,则进入步骤S106,否则将匹配库中与待识别人体姿态的相似度低于三级相似度阈值的人体姿态剔除并进入步骤S304;
S304,本次分级分类结束,进入步骤S106。
5.根据权利要求1-4之一所述的基于毫米波雷达的人体姿态识别系统,其特征在于,所述匹配库是指包含所有可能为待识别人体姿态的预定义人体姿态集合。
6.根据权利要求5所述的基于毫米波雷达的人体姿态识别系统,其特征在于,其硬件设备包括:毫米波雷达传感器、信号收发组件、微控制单元MCU、DSP、通信模、外围电路中央处理器
7.根据权利要求6所述的基于毫米波雷达的人体姿态识别系统,其特征在于,所述毫米波雷达子系统工作过程如下:
毫米波雷达子系统周期性发射毫米波信号,并接收检测区域反馈的回波,发射信号与回波信号间时延为 ,载波的中心频率为 ;所述发射信号采用线性调频连续波,其表达式为 ,其中B为信号带宽,T是扫频周期;所述发射信号与接收信号表达式为:
其中,AT与AR分别表示发射信号和接收信号的幅值, 为接收信号频率,其表达式为,其中 为多普勒频移;
将回波信号与发射信号混频并经过带通滤波后得到中频信号,其表达式为:
将中频信号经模数转换ADC采样,即得到原始数字中频信号数据,简称原始数据。

说明书全文

基于毫米波雷达的人体姿态识别系统

发明领域

[0001] 本发明属于模式识别技术领域,具体涉及一种基于毫米波雷达的人体姿态识别系统。

背景技术

[0002] 随着技术的进步和市场的发展,生产生活中的智能化程度越来越高。而生产生活智能化不可缺少的一项重要技术就是人体姿态识别。AIoT大潮推动与国家政策支持,触控式交互方式亟待智能化转型。未来社会,人机交互、控制、检测、监护等都将向着自动化与智慧化发展,而这正需要非接触式、全天候、便捷无感、支持用户自定义的人体姿态识别技术。
[0003] 目前市场上已有一些人体姿态识别技术与方案,例如基于可见光图像和深度图的人体姿态识别技术等。然而现有技术计算开销大,对光照条件要求较高,无法穿透或绕过障碍物,抗干扰能差,有泄露用户隐私险。而本发明所设计的毫米波雷达系统计算复杂度低,不会泄露用户隐私,具有一定的遮挡物穿透性,且不易受到环境因素(如温度、光照等)影响,具有传统人体姿态识别设备无法比拟的优点。

发明内容

[0004] 本发明的目的在于提出一种非接触式、全天候、便捷无感、支持用户自定义的人体姿态识别系统和方法。
[0005] 为了在人体姿态识别中提高控制便捷度、准确度,克服基于传统视觉图像方法计算开销大,对光照条件要求较高,无法穿透或绕过障碍物,抗干扰能力差,有泄露用户隐私风险等缺陷,本发明将毫米波雷达作为数据采集终端,设计了一套基于毫米波雷达结合人工智能方法的人体姿态识别系统和方法。本发明包括创新性地设计了由“判决过程”、“过滤过程”和“多级分类过程”组成的人工智能分类方法,对人体姿态进行过滤和分级分类,最大化地利用了人体姿态的多种特征数据,并进行组合运用。本发明可适应于多种人体姿态的识别,并可根据用户需求进行自定义设计而不局限于特定的某些人体姿态,具有可拓展性和广泛适应性。
[0006] 本发明提出的基于毫米波雷达的人体姿态识别系统,包括毫米波雷达子系统、数据处理跟踪定位子系统、人工智能分类子系统;其中,所述毫米波雷达子系统用于向检测范围内发射线性调频连续波(LFMCW)信号,并采集人体反射的雷达回波数据,经混频、滤波和模数转换(ADC)采样后输出中频原始数据;所述数据处理与跟踪定位子系统用于从原始数据中提取能够表征人体姿态的多种特征,包括但不限于距离、速度、加速度、方位、高度、能量、统计特征等,同时实时跟踪定位人体所在位置;所述人工智能分类子系统用于对特征信息进行过滤、分类和判决,综合分类和判决结果确定人体姿态。
[0007] 本发明中,所述人工智能分类子系统的判决过程,包含以下步骤:S101,判断是否存在运动人体,若不存在则继续S101,若存在进入步骤S102;
S102,进行人体姿态判断,若待判断数据与某一人体姿态特征数据的相似度大于第一特征阈值Q1时,则进入步骤S107,否则进入步骤S103;
S103,进入过滤过程,过滤掉一些不可能的人体姿势,进入步骤S104;
S104,进行人体姿态判断,若待判断数据与某一人体姿态特征数据的相似度大于第二特征阈值Q2时,则进入步骤S107,否则进入步骤S105;
S105,进入分类过程,针对某些特征,利用人工神经网络调用预训练的分类模型进行分类,进入步骤S106;
S106,若待识别人体姿态与其中一种人体姿态的相似度超过第三特征阈值Q3,则进入步骤S107,否则判断为未定义人体姿态并进入步骤S108;
S107,将待识别人体姿态判决为某一人体姿态,进入步骤S108;
S108,将判决结果反馈,本次判决结束,返回步骤S101。
[0008] 本发明中,所述人工智能分类子系统的过滤过程,包含以下步骤:S201,依据待识别人体姿态的速度特征信息,判断是否小于速度阈值,若是则进入步骤S202,否则进入步骤S104;
S202,进行一级过滤,若待匹配库中只有三种或三种以下的人体姿态的速度特征值超过待识别人体姿态的速度特征值,则将待匹配库中的速度特征值小于速度阈值的人体姿态滤除并进入步骤S104,否则将待匹配库中的速度特征值大于速度阈值的人体姿态滤除并进入步骤S203;
S203,依据待识别人体姿态的方位特征信息,判断方位变化与极值相似度是否属于方位阈值范围,若是则进入步骤S204,否则进入步骤S104;
S204,进行二级过滤,若待识别人体姿态的方位特征值落在待匹配库中三种或三种以下的人体姿态的方位特征值区间,则将待匹配库中除这几种人体姿态外的其他人体姿态滤除并进入步骤S104,否则将待匹配库中的几种人体姿态滤除并进入步骤S205;
S205,依据待识别人体姿态的加速度特征信息,判断是否小于加速度阈值,若是则进入步骤S206,否则进入步骤S104;
S206,进行三级过滤,若待匹配库中只有三种或三种以下的人体姿态的加速度特征值超过待识别人体姿态的加速度特征值,则将待匹配库中的加速度特征值小于速度阈值的人体姿态滤除并进入步骤S104,否则将待匹配库中的速度特征值大于加速度阈值的人体姿态滤除并进入步骤S207;
S207,依据待识别人体姿态的方位特征信息,判断高度变化与极值相似度是否属于高度阈值范围,若是则进入步骤S208,否则进入步骤S104;
S208,进行四级过滤,若待识别人体姿态的高度特征值落在待匹配库中三种或三种以下的人体姿态的高度特征值区间,则将待匹配库中除这几种人体姿态外的其他人体姿态滤除并进入步骤S104,否则将待匹配库中的几种人体姿态滤除并进入步骤S209;
S209,本次过滤结束,进入步骤S104。
[0009] 本发明中,所述人工智能分类子系统的分类过程,采用多级人工神经网络分类,在所有人体姿态特征中选取几种(例如三种)作为分类特征,分级分类进行判断,每一级分类都把相似度低于分类相似度阈值的人体姿态从匹配库中剔除,每经过一级分类,待识别人体姿态的可能范围就越小,越容易确定。分类过程包含以下步骤:S301,进行一级分类,若匹配库中与待识别人体姿态的相似度高于一级相似度阈值的人体姿态只有一种或两种,则进入步骤S106,否则将匹配库中与待识别人体姿态的相似度低于一级相似度阈值的人体姿态剔除并进入步骤S302;
S302,进行二级分类,若匹配库中与待识别人体姿态的相似度高于二级相似度阈值的人体姿态只有一种或两种,则进入步骤S106,否则将匹配库中与待识别人体姿态的相似度低于二级相似度阈值的人体姿态剔除并进入步骤S303;
S303,进行三级分类,若匹配库中与待识别人体姿态的相似度高于三级相似度阈值的人体姿态只有一种或两种,则进入步骤S106,否则将匹配库中与待识别人体姿态的相似度低于三级相似度阈值的人体姿态剔除并进入步骤S304;
S304,本次分级分类结束,进入步骤S106。
[0010] 本发明中,所述人工智能分类子系统的匹配库是指包含所有可能为待识别人体姿态的预定义人体姿态集合。
[0011] 本发明中,系统涉及的硬件设备包括:毫米波雷达传感器、信号收发组件、微控制单元(MCU)、DSP、通信模、外围电路中央处理器等。
[0012] 本发明中,所述毫米波雷达子系统工作过程如下:所述毫米波雷达子系统周期性发射毫米波信号并接收检测区域反馈的回波,发射信号与回波信号间时延为 ,载波的中心频率为 。所述发射信号采用线性调频连续波,其表达式为 ,其中B为信号带宽,T是扫频周期。所述发射信号与接收信号表达式为:
其中,AT与AR分别表示发射信号和接收信号的幅值, 为接收信号频率,其表达式为,其中 为多普勒频移。
[0013] 将回波信号与发射信号混频并经过带通滤波后得到中频信号,其表达式为:将中频信号经模数转换(ADC)采样即可得到原始数字中频信号数据,简称原始数据。
[0014] 本发明系统的工作流程为:人在雷达检测范围内活动,毫米波雷达子系统周期性发射线性调频连续波信号并接收检测范围反馈的回波信号,经过混频、滤波和ADC采样后得到原始数据;
将原始数据送入数据处理与跟踪定位子系统,经过一系列信号处理过程,提取能够表征人体姿态的多种特征,包括但不限于距离、速度、加速度、方位、高度、能量、统计特征等,同时实时跟踪定位人体所在位置;
将特征数据送入人工智能分类子系统中进行分类和判决,若系统判别为存在人体姿态,则判断是否已确定人体姿态,若是则输出人体姿态,否则送至过滤过程;经过过滤过程过滤后判断能否确定人体姿态,若能则输出人体姿态,否则进入分类过程;经过分类过程分级分类,最终待识别人体姿态只剩下一种或两种可能匹配的人体姿态,若与其中一种的相似度大于相似度阈值则判断为该人体姿态并输出该人体姿态,否则判断为未定义人体姿态并输出。
[0015] 本发明具有以下优点:本发明创新性地设计了结合毫米波雷达和人工智能技术的人体姿态识别系统和方法,能够实时跟踪定位人体位置,并结合“判决”、“过滤”和“分类”综合识别人体姿态,识别结果更为准确可靠。本发明所设计的系统和方法具有全天候、实时性、抗干扰、抗遮挡、不依赖照明条件等优势。本发明能够识别不同身高、体型、年龄和性别的人的不同动作姿态,具有较高鲁棒度和适应性。本发明适用于多种人体姿态,可根据用户需求进行自定义设计而不局限于特定的某些人体姿态,具有可拓展性和广泛适应性。
附图说明
[0016] 图1 本发明一种实施例的人工智能分类判决过程流程图
[0017] 图2 本发明一种实施例的人工智能分类过滤过程流程图。
[0018] 图3 本发明一种实施例的人工智能分类分级分类流程图。
[0019] 图4 本发明一种实施例的人体追踪定位及姿态识别结果图。
[0020] 图5本发明一种实施例的几种人体姿态示意图。
[0021] 图6本发明一种实施例的几种人体姿态的某种特征数据的各5个样本特征图。

具体实施方式

[0022] 下面结合附图对本发明的实施例作详细说明。本实施例在以本发明技术方案为前提下进行实施,给出了详细的实施方式和具体的操作过程,但本发明的保护范围不限于下述的实施例。在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护范围。
[0023] 本发明的其中一种实施例的应用场景如图4所示:(1)安装毫米波雷达系统终端(简称终端),称其感应和采集范围为“作用空间”;
(2)预设前进、后退、坐下、蹲下、站立、弯腰、跌倒等7种人体姿态,人体在作用空间内靠近终端定义为“前进”,人体在作用空间内远离终端定义为“后退”,其他5种姿态定义如图5所示;
(3)每种人体姿态由不同体型、性别、年龄的主体(人)在作用空间内不同位置分别采集
200个样本数据,通过对比同类样本之间的特征相似性,将异常样本剔除,确保类内样本特征相似且类间不同,用自定义的轻量化人工神经网络对7种人体姿态的所有微多普勒特征样本进行训练得到微多普勒特征分类模型;
(4)系统初始化:设置并上传雷达参数,加载分类模型并上传推理网络参数;
(5)毫米波雷达终端实时发射周期性的线性调频连续波信号,并接收作用空间反馈的回波信号,人体在作用空间内运动时,毫米波雷达终端捕捉到当前人体所处姿态的原始数据;
(6)在中央处理器或MCU或DSP中对原始数据进行一系列信号处理,得到距离、速度、加速度、方位、高度、能量、统计特征等特征数据,组合距离和方位信息得到人体位置,实时显示该人体位置并将特征数据发送到人工智能分类子系统;
(7)在人工智能分类子系统中,根据特征数据判决是否存在人体姿态,若是则进一步判决是否已确定人体姿态,若是则输出人体姿态,否则进入过滤过程,经过过滤过程过滤后判断能否确定人体姿态,若能则输出人体姿态,否则进入分类过程,经过分类过程分级分类,最终待识别人体姿态只剩下一种或两种可能匹配的人体姿态,若与其中一种的相似度大于相似度阈值则判断为该人体姿态并输出该人体姿态,否则判断为未定义人体姿态并输出。
[0024] 上述具体实施方式仅为本发明的一种实施例,本发明不仅仅局限于该实施例。在本发明的精神和权利要求的保护范围内,在未作出实质性创新的情况下,都落入本发明的保护范围。
高效检索全球专利

专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。

申请试用

分析报告

专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。

申请试用

QQ群二维码
意见反馈