首页 / 专利库 / 心理学与精神病学 / 构音障碍 / 一种多功能智能导盲方法、处理器及其装置

一种多功能智能导盲方法、处理器及其装置

阅读:497发布:2020-05-14

专利汇可以提供一种多功能智能导盲方法、处理器及其装置专利检索,专利查询,专利分析的服务。并且本 发明 公开了一种多功能智能导盲方法,包括:接收语音指令,并进行导航;获取障碍物的图像数据;对所述数字图像数据识别处理,若所识别的障碍物为静态物体,判断该障碍物构成威胁,则产生 超 声波 测距控制指令,若测距结果在预设的报警范围之内,则根据所述测距结果生成并输出语音报警信息或震动提示信息;若所识别的障碍物为动态物体,则产生 超声波 测距控制指令,根据所述测距结果进行威胁预判计算, 若该障碍物在预设的报警范围之内,则生成并输出语音报警信息或震动提示信息。本发明还公开了一种多功能智能导盲装置及处理器。本发明可以更加安全、方便可靠地为盲人提供导盲服务,避免走更多的路程和遇到障碍物,进而能够快速安全到达目的地。,下面是一种多功能智能导盲方法、处理器及其装置专利的具体信息内容。

1.一种多功能智能导盲方法,其特征在于,包括以下步骤:
S1、接收语音指令,并根据语音指令生成最优路径的语音信息以进行导航;
S2、导航过程中,获取障碍物的图像数据;
S3、对所述图像数据识别处理,包括图像滤波、图像分割、图像二值化、图像特征提取、图像分类以及特征匹配,识别出障碍物;
S4、若所识别的障碍物为静态物体,判断该障碍物构成威胁,则产生声波测距控制指令,若测距结果在预设的报警范围之内,则根据所述测距结果生成并输出语音报警信息或震动提示信息;
S5、若所识别的障碍物为动态物体,则产生超声波测距控制指令,根据测距结果进行威胁预判计算,威胁预判计算公式为
t-发现运动目标后盲人可以继续行走的时间、L-动态目标的预警范围、V1-盲人的行走速度、V2-运动目标的速度、θ-盲人和运动目标的前进方向夹,其中,L为3m~5m,若t<2s时,则判断已进入了报警范围之内,若该障碍物在预设的报警范围之内,则生成并输出语音报警信息或震动提示信息;
S6、判断未到达目的地,返回步骤S2,如此反复执行所述步骤S2~S5,直至到达目的地。
2.根据权利要求1所述的多功能智能导盲方法,其特征在于,所述步骤S1具体包括以下步骤:
接收语音指令;
根据所述语音指令识别是否为指定用户,若是,则识别所述语音指令中的具体内容,若为目的地,则根据该目的地发出卫星定位请求
接收定位数据,并检索所述定位数据至目的地信息之间所有的路径信息;
根据预设方式对所有所述路径信息进行计算,得到最优路径,并生成最优路径的语音信息并输出播放。
3.一种多功能智能导盲处理器,其特征在于,包括:
最优路径导航模,用于接收语音指令,并根据语音指令生成最优路径的语音信息以进行导航;
障碍物探测模块,其具体包括,
障碍物的图像数据获取模块,用于导航过程中,获取障碍物的图像数据;
障碍物的图像数据识别处理模块,用于对所述图像数据识别处理,包括图像滤波、图像分割、图像二值化、图像特征提取、图像分类以及特征匹配,识别出障碍物;
静态障碍物的处理模块,用于判断该障碍物构成威胁,则产生超声波测距控制指令,若测距结果在预设的报警范围之内,则根据所述测距结果生成并输出语音报警信息或震动提示信息;
动态障碍物的处理模块,用于产生超声波测距控制指令,根据测距结果进行威胁预判计算,威胁预判计算公式为
t-发现运动目标后盲人可以继续行走的时间、L-动态目标的预警范围、V1-盲人的行走速度、V2-运动目标的速度、θ-盲人和运动目标的前进方向夹角,其中,L为3m~5m,若t<2s时,则判断已进入了报警范围之内,若该障碍物在预设的报警范围之内,则生成并输出语音报警信息或震动提示信息;
到达目的地判断模块,用于判断是否到达目的地。
4.根据权利要求3所述的多功能智能导盲处理器,其特征在于:所述最优路径导航模块具体包括,
语音指令接收模块,用于接收语音指令;
语音指令识别模块,用于根据所述语音指令识别是否为指定用户,若是,则识别所述语音指令中的具体内容,若为目的地,则根据该目的地发出卫星定位请求;
定位数据接收模块,用于接收定位数据,并检索所述定位数据至目的地信息之间所有的路径信息;
最优路径计算模块,用于根据预设方式对所有所述路径信息进行计算,得到最优路径,并生成最优路径的语音信息并输出播放。
5.一种用于执行权利要求1所述方法的多功能智能导盲装置,其特征在于,包括:总处理器、与所述总处理器连接的环境感知模块、定位接收模块、语音通信模块、电源模块;
所述总处理器为多功能智能导盲处理器,包括微处理器、安装在所述微处理器上的嵌入式操作系统、以及运行在嵌入式操作系统上的导盲服务软件包;
所述环境感知模块,包括环境摄像头、超声探测器和微型台,所述环境摄像头和超声探测器方向一致,且均安装在所述微型云台上面,所述环境摄像头和微型云台与所述总处理器连接,所述超声探测器通过串口与所述总处理器连接;
所述定位接收模块,包括北斗接收器和GPS接收器,与所述总处理器连接;
所述语音通信模块,包括语音指令接收器、语音提示器和震动提示器,所述语音指令接收器和语音提示器通过音频输入端口与所述总处理器连接,所述震动提示器与所述总处理器连接;
所述电源模块,包括一个总电源,与所述总处理器、环境感知模块、定位接收模块和语音通信模块连接。
6.根据权利要求5所述的多功能智能导盲装置,其特征在于:
所述环境摄像头包括摄像镜头和图像传感器,所述摄像镜头为具有红外夜视功能的微型数字摄像镜头,所述图像传感器为CCD感光器件;
所述超声探测器包括发射探头、接收探头、信号放大器功率放大器
7.根据权利要求5所述的多功能智能导盲装置,其特征在于:
所述语音指令接收器包括拾音器和信号放大电路
所述语音提示器包括语音芯片和扬声器;
所述震动提示器包括微型震动电机和驱动电路。

说明书全文

一种多功能智能导盲方法、处理器及其装置

技术领域

[0001] 本发明属于信息工程技术领域,涉及一种智能导盲技术,尤其涉及一种多功能智能导盲方法、处理器及其装置。

背景技术

[0002] 目前电子类的导盲器是利用声波,红外线探头等回波测距的原理进行设计的,或者采用图像传感器和激光测距的方法对障碍物进行测距,这些方法能够很好探测障碍物距离,但是对于识别障碍物类别和动态障碍物存在着功能缺陷
[0003] 另外利用现代信息技术的导盲方法或系统,如基于无线通信的导盲装置,利用无线通信和GPS定位,通过人工服务帮助盲人导航,顺利到达目的地,但是这种装置必须需要另一个人的帮助,不够智能自动化,且不能自动识别障碍;如基于可视化的导盲方法,通过图像处理、图像感触器以及方位提示器,使盲人感受到障碍物形状信息和躲避方向,但是这种方法不能使盲人有效感受到障碍物距离信息和障碍物类别,尤其是对动态障碍物的危险预判存在着一定缺陷。

发明内容

[0004] 本发明所要解决的技术问题在于提供一种多功能智能导盲方法、处理器及其装置,可以迅速感知判断周围静态和动态障碍物的类别和距离信息,提供最佳导航路径和安全行进通道,以确保盲人用户的出行更加安全和快捷。
[0005] 为解决上述技术问题,本发明提供一种多功能智能导盲方法,所述方法由一种具有多功能智能导盲功能的装置来实现,包括以下步骤:
[0006] S1、接收语音指令,并根据语音指令生成最优路径的语音信息以进行导航;
[0007] S2、导航过程中,获取障碍物的图像数据;
[0008] S3、对所述图像数据识别处理,包括图像滤波、图像分割、图像二值化、图像特征提取、图像分类以及特征匹配,识别出障碍物;
[0009] S4、若所识别的障碍物为静态物体,判断该障碍物构成威胁,则产生超声波测距控制指令,若测距结果在预设的报警范围之内,则根据所述测距结果生成并输出语音报警信息或震动提示信息;
[0010] S5、若所识别的障碍物为动态物体,则产生超声波测距控制指令,根据所述测距结果进行威胁预判计算,威胁预判计算公式为
[0011]
[0012] t-发现运动目标后盲人可以继续行走的时间、L-动态目标的预警范围、V1-盲人的行走速度、V2-运动目标的速度、θ-盲人和运动目标的前进方向夹,其中,L为3m~5m,若t<2s时,则判断已进入了报警范围之内,若该障碍物在预设的报警范围之内,则生成并输出语音报警信息或震动提示信息;
[0013] S6、判断未到达目的地,返回步骤S2,如此反复执行所述步骤S2~S5,直至到达目的地。
[0014] 按上述技术方案,所述步骤S1具体包括以下步骤:
[0015] 接收语音指令;
[0016] 根据所述语音指令识别是否为指定用户,若是,则识别所述语音指令中的具体内容,若为目的地,则根据该目的地发出卫星定位请求
[0017] 接收定位数据,并检索所述定位数据至目的地信息之间所有的路径信息;
[0018] 根据预设方式对所有所述路径信息进行计算,得到最优路径,并生成最优路径的语音信息并输出播放。
[0019] 相应的,本发明还提供了一种多功能智能导盲处理器,包括:
[0020] 最优路径导航模,用于接收语音指令,并根据语音指令生成最优路径的语音信息以进行导航;
[0021] 障碍物探测模块,其具体包括,
[0022] 障碍物的图像数据获取模块,用于导航过程中,获取障碍物的图像数据;
[0023] 障碍物的图像数据识别处理模块,用于对所述图像数据识别处理,包括图像滤波、图像分割、图像二值化、图像特征提取、图像分类以及特征匹配,识别出障碍物;
[0024] 静态障碍物的处理模块,用于判断该障碍物构成威胁,则产生超声波测距控制指令,若测距结果在预设的报警范围之内,则根据所述测距结果生成并输出语音报警信息或震动提示信息;
[0025] 动态障碍物的处理模块,用于产生超声波测距控制指令,根据所述测距结果进行威胁预判计算,威胁预判计算公式为
[0026]
[0027] t-发现运动目标后盲人可以继续行走的时间、L-动态目标的预警范围、V1-盲人的行走速度、V2-运动目标的速度、θ-盲人和运动目标的前进方向夹角,其中,L为3m~5m,若t<2s时,则判断已进入了报警范围之内,若该障碍物在预设的报警范围之内,则生成并输出语音报警信息或震动提示信息;
[0028] 到达目的地判断模块,用于判断是否到达目的地。
[0029] 按上述技术方案,所述最优路径导航模块具体包括,
[0030] 语音指令接收模块,用于接收语音指令;
[0031] 语音指令识别模块,用于根据所述语音指令识别是否为指定用户,若是,则识别所述语音指令中的具体内容,若为目的地,则根据该目的地发出卫星定位请求;
[0032] 定位数据接收模块,用于接收定位数据,并检索所述定位数据至目的地信息之间所有的路径信息;
[0033] 最优路径计算模块,用于根据预设方式对所有所述路径信息进行计算,得到最优路径,并生成最优路径的语音信息并输出播放。
[0034] 本发明还提供了一种多功能智能导盲装置,包括:总处理器、与所述总处理器连接的环境感知模块、定位接收模块、语音通信模块、电源模块;
[0035] 所述总处理器为多功能智能导盲处理器,包括微处理器、安装在所述微处理器上的嵌入式操作系统、以及运行在嵌入式操作系统上的导盲服务软件包;
[0036] 所述环境感知模块,包括环境摄像头、超声探测器和微型台,所述环境摄像头和超声探测器方向一致,且均安装在所述微型云台上面,所述环境摄像头和微型云台与所述总处理器连接,所述超声探测器通过串口与所述总处理器连接;
[0037] 所述定位接收模块,包括北斗接收器和GPS接收器,与所述总处理器连接;
[0038] 所述语音通信模块,包括语音指令接收器、语音提示器和震动提示器,所述语音指令接收器和语音提示器通过音频输入端口与所述总处理器连接,所述震动提示器与所述总处理器连接;
[0039] 所述电源模块,包括一个总电源,与所述总处理器、环境感知模块、定位接收模块和语音通信模块连接。
[0040] 按上述技术方案,所述环境摄像头包括摄像镜头和图像传感器,所述摄像镜头为具有红外夜视功能的微型数字摄像镜头,所述图像传感器为CCD感光器件;
[0041] 所述超声探测器包括发射探头、接收探头、信号放大器功率放大器
[0042] 按上述技术方案,所述语音指令接收器包括拾音器和信号放大电路
[0043] 所述语音提示器包括语音芯片和扬声器;
[0044] 所述震动提示器包括微型震动电机和驱动电路。
[0045] 本发明具有以下有益效果。
[0046] 1.最优路径导航模块可以为盲人用户提供最佳导航路径,障碍物探测模块,可以360度全方位迅速获取周围障碍物图像和距离信息,优化并加快了图像识别过程,不仅能识别静态障碍物,而且能识别动态障碍物,当判断障碍物在报警范围之内时,可以发出语音或震动提示,从而确保盲人用户有效迅速避碰障碍物,使得出行更为安全和快捷。
[0047] 2.采用具有红外夜视功能的微型数字摄像镜头,可以在黑暗环境下进行图像采集和测距工作,能为盲人用户夜间出行提供可靠的环境信息和安全的避碰导盲服务。
[0048] 3.盲人用户可以选择定位接收模块的北斗接收器或GPS接收器作为卫星定位方式,能够更加精确定位盲人用户的所在位置,通过使用优化路径算法,可帮助获取始发地至目的地之间的最佳路径,同时结合语音合成功将导航文字信息转化为语音信息,帮助盲人更加快速安全的到达目的地。
[0049] 4.本发明只执行指定用户的指令,能够防止环境噪音和路人语音信息干扰,并且用户本人能够独立地通过本发明进行导盲服务。
[0050] 5.本发明提供的多功能智能导盲装置体积、重量均较小,可以嵌入应用到多种导盲器中,如导盲手杖、导盲包、导盲车、导盲帽等,使用范围广。附图说明
[0051] 图1为本发明多功能智能导盲方法一个实施例流程图
[0052] 图2为图1中步骤S1的具体流程图;
[0053] 图3为路径优化算法的原理示意图;
[0054] 图4障碍物探测模块流程图;
[0055] 图5为威胁预判计算的原理示意图;
[0056] 图6为本发明多功能智能导盲装置一个实施例的结构示意图;
[0057] 图7为超声探测器的工作原理图。

具体实施方式

[0058] 下面结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚完整的描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所以其他实施例,都属于本发明保护的范围。
[0059] 图1为本发明多功能智能导盲方法一个实施例的流程图,本方法放在专的多功能智能导盲处理器上实现。如图1所示,本实施例的方法包括以下步骤。
[0060] 步骤S1、接收语音指令,并根据语音指令生成最优路径的语音信息以进行导航。
[0061] 所述步骤S1具体包括以下步骤:
[0062] 接收语音指令;
[0063] 根据所述语音指令识别是否为指定用户,若是,则识别所述语音指令中的具体内容,若为目的地,则根据该目的地发出卫星定位请求;
[0064] 接收定位数据,并检索所述定位数据至目的地信息之间所有的路径信息;
[0065] 根据预设方式对所有所述路径信息进行计算,得到最优路径,并生成最优路径的语音信息并输出播放。
[0066] 举例来说,如图2所示,所述步骤S1由最优路径导航模块执行,具体包括:语音指令接收模块接收指定用户、环境噪音、或路人的语音指令,语音指令识别模块对所述语音指令进行预处理,包括采样、反混叠滤波、语音增强等,从所述语音指令的波形数据中提取一组或几组能够描述所述语音指令的特征参数,按照规定的准则与用户声谱识别数据库对所述特征参数进行模式匹配,对模式匹配得到的初步识别结果进行后处理:利用用户的声道参数和词条中各状态持续时间的概率分布来改进识别率,最终根据识别结果判断是否为指定用户,若非指定用户的语音指令则拒绝执行,返回等待语音输入,若是则识别所述语音指令中的具体内容,所述具体内容为目的地设置、系统设置、或信息查询,若为目的地设置,则发出卫星定位请求,定位数据接收模块接收指定用户当前位置的定位数据,检索高分辨率2D/3D地图库,判断指定用户当前所在地区地图中的精确位置,检索目的地设置的目的地信息至所述精确位置之间的所有路径信息,最优路径计算模块根据预设方式对所述所有路径信息进行计算,即通过路径优化计算方法获取最优路径,调用语音合成模块,生成所述最优路径的语音信息,生成语音芯片控制指令进行语音合成,然后发出语音输出指令并播放,判断是否到达目的地,否则返回卫星定位请求,若是则判断是否结束语音导盲服务,若是则结束,否则返回接收语音指令步骤。
[0067] 所述语音合成模块,还可以生成其他导航信息并播放,为用户提供导航服务:如在行进路程中对当前所在位置、行进路线前方的每个步行通道口作出“前方XX米左转/右转”等语音提示,直至达到目的地。
[0068] 图3为所述路径优化算法的原理示意图,鉴于盲人在出行过程中主要是依靠行走的的特点,对路面状况(障碍物大小、密集程度)以及路段拥挤程度依赖性较大,因此所使用的路径选择算法和传统的车辆导航所使用的路径选择算法有很大的不同,这里对其进行了优化以适用于盲人导航,假设始发地-目的地之间有N条可能到达路径,其中的一条可能路径上有N1个路段,N2个交叉路口,N3个人行天桥,道路状况、拥挤程度、交叉路口以及人行天桥的权重系数分别为W1、W2、W3、W4,每个路段、交叉路口以及人行天桥的几何长度分别为Ri、Ci、Bi,不考虑盲人在行进过程中乘车的因素,则该路径的有效总距离为[0069]
[0070] 计算所有可能路径的有效距离,则选择的最优路径为:
[0071] S=Min(S1,S2,S3…SN)
[0072] 如图4所示,障碍物探测模块执行步骤S2-S5的具体流程。
[0073] 步骤S2、导航过程中,获取障碍物的图像数据。
[0074] 举例来说,障碍物的图像数据获取模块接收总处理器的指令控制微型云台进行旋转、俯仰等动作,连续读取图像数据。
[0075] 步骤S3、对所述图像数据识别处理,包括图像滤波、图像分割、图像二值化、图像特征提取、图像分类以及特征匹配,识别出障碍物;
[0076] 举例来说,障碍物的图像数据识别处理模块对上述图像数据进行预处理,包括图像滤波、图像分割、图像的二值化,以减小后续算法的复杂度,再对预处理后的图像数据进行图像特征提取,包括颜色特征,形状特征,纹理特征以及空间关系特征,识别障碍物为静态障碍物或动态障碍物。
[0077] 步骤S4、若所识别的障碍物为静态物体,判断该障碍物构成威胁,则产生超声波测距控制指令,若测距结果在预设的报警范围之内,则根据所述测距结果生成并输出语音报警信息或震动提示信息;
[0078] 举例来说,静态障碍物处理模块处理上述静态障碍物,首先判断静态障碍物目标是否构成威胁,若是则产生指令控制超声波测距,若测距结果在预设的报警范围之内,所述报警范围理想值可设置为1.5m~2.5m,则调用语音合成模块,生成所述测距结果的语音信息,生成语音芯片控制指令进行语音合成,然后发出语音输出指令并播放,播放内容如“您的左前方2米处有一桌子”,同时发出震动提示信息,最后判断是否结束导盲服务,若是则结束,否则返回上述步骤S2,若静态障碍物在距离很远时,可以暂不提醒。
[0079] 步骤S5、若所识别的障碍物为动态物体,则产生超声波测距控制指令,根据所述测距结果进行威胁预判计算,若该障碍物在预设的报警范围之内,则生成并输出语音报警信息或震动提示信息。
[0080] 举例来说,动态障碍物处理模块处理上述动态障碍物,首先进行超声波测距,之后进行运动目标威胁预判计算,若计算结果在预设的报警范围之内,所述报警范围理想值可设置为3m~5m,则调用语音合成模块,生成所述计算结果的语音信息,生成语音芯片控制指令进行语音合成,然后发出语音输出指令并播放,播放内容如“您的左前方5米处有一辆汽车”,同时发出震动提示信息,最后判断是否结束导盲服务,若是则结束,否则返回上述步骤S2,若动态障碍物在距离很远时,可以暂不提醒。
[0081] 图5所述威胁预判计算的原理示意图,假设超声波测距有效距离是10m,动态目标的预警范围为5m。当检测到运动目标后,盲人至多可以行走t秒便到达预警范围内。盲人的行走速度为V1,运动目标的速度为V2,盲人和运动目标的前进方向夹角为θ,在图中,V1、V2以及θ的值都可以根据图像处理和超声波测距可得到,因此根据数学关系可知:
[0082]
[0083] 假设盲人的反应时间为2s,则t<2时,则判断已进入了报警范围之内。
[0084] 所述障碍物探测模块还可以执行通道检测,所述通道检测是根据障碍物在图像中的位置以及用户的行进方向,来判断障碍物之间是否存在安全通道,以此提醒用户的行进方向,例如盲人的左前方、前方和右前方均判断有障碍物,以此可判断出有两条安全通道,生成所述安全通道的语音信息并播放,如“您的前方有两条安全通道,您可选择稍微偏左或偏右行走”,从而引导盲人行走,并在通道接近障碍物时向盲人语音和震动提示。
[0085] 所述通道检测的具体步骤为,对上述步骤S3中图像特征提取的图像数据进一步处理,包括:背景分离,将图像中的主要目标与背景相分割;边缘检测,提取障碍目标的边缘数据信息;通道判断,根据障碍物的分布和它们之间的空白区域判断通道条数、通道方向以及通道是否可穿过。若判断存在安全通道则进行语音提示,否则返回步骤S2。
[0086] 步骤S6、判断未到达目的地,返回步骤S2,如此反复执行所述步骤S2~S5,直至到达目的地。
[0087] 举例来说,到达目的地判断模块判断是否到达目的地,若是则结束导航,否则返回步骤S2,如此反复执行所述步骤S2~S3及S4或S5,直至到达目的地。
[0088] 所述多功能智能导盲处理器还可以进行其他语音导盲服务,如卫星定位方式设置和信息查询。若步骤S1所述的语音指令的具体内容为系统设置、或信息查询,执行所述语音指令,并调用语音合成模块,生成所述执行结果的语音信息,生成语音芯片控制指令进行语音合成,然后发出语音输出指令并播放,最后判断是否结束语音导盲服务,若是则结束,否则返回接收语音指令步骤。
[0089] 图6为本发明提供的多功能智能导盲装置一个实施例的结构示意图,包括总处理器、与所述总处理器连接的环境感知模块、定位接收模块、语音通信模块、电源模块。
[0090] 所述总处理器为上述多功能智能导盲处理器;
[0091] 所述环境感知模块,包括环境摄像头、超声探测器和微型云台,所述环境摄像头和超声探测器方向一致,且均安装在所述微型云台上面,所述环境摄像头和微型云台与所述总处理器连接,所述超声探测器通过串口与所述总处理器连接;
[0092] 所述定位接收模块,包括北斗接收器和GPS接收器,与所述总处理器连接;
[0093] 所述语音通信模块,包括语音指令接收器、语音提示器和震动提示器,所述语音指令接收器和语音提示器通过音频输入端口与所述总处理器连接,所述震动提示器与所述总处理器连接;
[0094] 所述电源模块,包括一个总电源,与所述总处理器、环境感知模块、定位接收模块和语音通信模块连接。
[0095] 举例说明,所述总处理器,包括微处理器和安装在微处理器上的嵌入式操作系统,以及运行在嵌入式操作系统上的导盲服务软件包,所述总处理器主要用于周围环境的感知判断、避碰导盲、语音通信和路径导航,以及对其它模块硬件资源的分配和控制。所述微处理器为ARM嵌入式处理器,所述嵌入式操作系统可为Linux、WinCE、Android系统中的一种。所述导盲服务软件包是总处理器的核心,通过控制系统硬件资源实现导盲服务功能,主要包括四个软件模块
[0096] 数据库模块,包括高分辨率2D/3D地图库、物体特征判别数据库、和用户声谱识别数据库。其中高分辨率2D/3D地图库是各个城镇地区的空间道路数据,经过了校正和加工处理生成的高精度地图数据库,用于提供导航信息和路径选择。物体特征判别数据库存储了一些常见物体的特征数据,如颜色特征、形状特征、纹理特征、空间关系特征等,主要用于障碍物目标特征查询匹配。鉴于盲人在行走路程中对障碍物的类型依赖性不大,其关心的主要重点在于能否躲避障碍物,尤其是运动中的障碍物目标,因此本发明所述物体特征判别数据库只存储一些常见的交通障碍物目标数据,并根据分类分为静态目标数据库和动态目标数据库,静态目标包括行人、树木、红绿灯、阶梯等路上常见障碍物,动态目标包括汽车、自行车、公共汽车等运动目标。用户声谱识别数据库存储了用户的语音模板信息,用于用户语音识别,以防路人及噪声语音信息干扰。所述高分辨率2D/3D地图库、物体特征判别数据库、用户声谱识别数据库均存储在所述嵌入式操作系统上。所述用户声谱识别数据库存储的语音模板信息,是从一个或多个使用者多次重复讲话中提取的语音参数模板,如“开始导盲”、“目的地设置”、“结束”等若干条语音指令,所形成的特定的语音模型库。
[0097] 语音通信软件模块,主要包括语音识别和语音合成算法。在接收到盲人语音输入信息时,结合用户声谱识别库与已知的语音样本进行模板匹配,进行盲人语音指令识别,可根据语音指令进行目的地和卫星定位方式设置以及相关信息查询。对于非设定用户的语音指令拒绝执行。当需要语音输出时,结合语音合成功能,为盲人提供导盲服务。
[0098] 避碰软件模块,主要包括图像识别算法、静态目标处理算法和动态目标处理算法、以及通道检测算法。通过控制微型云台动作(旋转、俯仰),读取连续采集到的数字图像,对图像数据依次进行滤波分析、图像特征提取、特征识别,特征提取的内容包括障碍物的颜色、形状、纹理、空间关系等,特征识别时将障碍物特征数据与物体特征判别数据库进行比较匹配,根据匹配结果分为静态目标和动态目标,并分别执行静态目标处理算法和动态目标处理算法,根据其处理结果判断是否进行预警提示;之后执行通道检测算法,判断行走方向上是否存在安全通道,根据分析结果语音提示行走和避碰方向。
[0099] 导航及路径选择软件模块,包括卫星定位和路径选择算法,根据盲人语音输入的目的地信息和定位接收模块输出的精确位置信息,在高分辨率2D/3D地图库内进行检索,判断盲人当前所在地区地图中的精确位置,结合设计的路径优化算法计算路径信息,获取最优路径,同时形成导航文字信息,结合语音合成功能,播放导航信息为其提供导航服务:在行进路程中对当前所在位置、行进路线前方的每个步行通道口作出“前方XX米左转/右转”等语音提示,直至达到目的地。
[0100] 所述环境感知模块,包括环境摄像头、超声探测器、微型云台,用于全方位采集和探测障碍物信息。所述环境摄像头和超声探测器均安装在微型云台上,摄像头和超声探测器安装方向一致,因此两者探测到障碍物是同一障碍物,在总处理器控制下,可全方位旋转、俯仰采集探测周围障碍物信息。所述环境摄像头与总处理器连接,工作时将数字图像信息传至总处理器进行图像处理和模式识别,所述环境摄像头包括摄像镜头和图像传感器,摄像镜头为具有红外夜视功能的数字摄像镜头,在黑暗的环境下仍可进行摄像,图像传感器为CCD感光器件。所述超声探测器包括发射探头、接收探头以及信号、功率放大器,通过串口与总处理器相连接,工作时接收总处理器的控制指令,发送和接收超声波测距,并将距离信息传至总处理器进行处理。超声探测器是通过超声波回声的时间差原理进行测距的,如图7所示,其工作步骤为:在总处理器的控制下,微处理器产生方波经过功率放大器功率放大,驱动发射探头发射超声脉冲,超声脉冲遇到障碍物发生反射,接收探头接收到回波后,经过信号放大器传递给总处理器,根据信号间的时间差从而得到障碍物的距离信息。所述微型云台与总控模块的微处理器连接,接收总处理器的控制指令可实现360度旋转、正负30度俯仰等动作,帮助全方位探测周围环境信息,所述微型云台旋转、俯仰频率由图像处理得出的障碍物密集程度而自适应调整,如障碍物较少时,微型云台工作频率较小,随障碍物的线性增加而频率增大。
[0101] 所述定位接收模块,包括北斗接收器和GPS接收器,用于获取盲人所在的定位数据,并将其经纬度信息传至总处理器,所述的北斗接收器和GPS接收器与总处理器连接,用户在使用时可通过语音指令选择其一进行定位,所述卫星定位周期可在程序中进行设置,如每3分钟进行一次卫星定位导航,确定使用者的当前位置和行进路线。
[0102] 所述语音通信模块,包括:语音指令接收器,语音提示器和震动提示器。所述语音指令接收器包括拾音器和信号放大电路,通过音频输入端口与总处理器相连接,用于接收语音信息,工作时将语音信息传至总处理器进行语音识别分析。所述语音提示器包括语音芯片和扬声器,通过音频输入端口与总处理器相连接,接收总处理器发送的语音指令,提供语音导盲服务,如行进到十字路口或转弯处时进行语音提示。所述震动提示器包括微型震动电机和驱动电路,与总处理器连接,当使用者距离障碍物太近时,接收总处理器的控制指令,发出震动提醒盲人止步。
[0103] 所述电源模块包括一个总电源,与上述其它模块连接,用于提供各模块所需要的供电电源,如定位接收模块所需要的DC 5V电源,环境摄像头DC 12V,超声探测器DC 5V,微型云台DC 5V,微处理器DC 5V,语音指令接收器DC 5V,震动提示器DC 3.3V,语音提示器DC5V。
[0104] 所述多功能智能导盲装置的工作过程是:首先由语音指令接收器接收用户语音指令,结合用户声谱识别库对语音指令识别分析,设置目的地信息,以及选择卫星定位方式,然后根据定位接收模块对用户当前位置精确定位,将经纬度信息传至总处理器,在高分辨率2D/3D地图库内进行查询,判断用户当前所在地区地图中的精确位置,结合路径优化算法计算路径信息,获取最优路径,同时形成导航信息,使用语音合成功能,将语音信息传至语音提示器,播放导航信息为盲人用户提供导航服务;同时,在行进的路程中,环境感知模块将连续拍摄到的数字图像传递给总处理器进行图像预处理、图像特征提取、图像分类、特征识别等工作,并结合物体特征判别数据库对障碍物目标进行特征匹配,根据障碍物目标是否运动的特征,分别进行静态目标处理和动态目标处理过程,根据其处理结果判断是否进行预警提示,包括编辑成语音和震动指令,通过控制语音通信模块的语音提示器和震动提示器来引导盲人,之后执行通道检测算法,检测是否存在安全行走通道,结合语音合成进行语音提示。
[0105] 应当理解的是,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,而所有这些改进和变换都应属于本发明所附权利要求的保护范围。
高效检索全球专利

专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。

申请试用

分析报告

专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。

申请试用

QQ群二维码
意见反馈