代步工具的控制方法和控制装置、代步工具系统

申请号 CN201610398690.X 申请日 2016-06-07 公开(公告)号 CN105892691A 公开(公告)日 2016-08-24
申请人 京东方科技集团股份有限公司; 发明人 张忆非; 袁佐;
摘要 本 发明 公开了一种代步工具控制方法和控制装置、代步工具系统,涉及控制领域,能够无需使用腿、臂或手等身体部位的动作即可对代步工具进行操作,解决了现有代步工具对于肢体不便人士操作困难的问题。本发明的方法包括:代步工具控制装置,包括:摄像头,用于拍摄使用者的眼部图像; 图像处理 单元,与所述摄像头相连,用于接收所述摄像头拍摄的眼部图像,并从中识别出使用者的眼部动作;控制单元,用于根据识别出的所述眼部动作生成对应的用于控制代步工具运动的动作指令。
权利要求

1.一种代步工具控制装置,其特征在于,包括:
摄像头,用于拍摄使用者的眼部图像;
图像处理单元,与所述摄像头相连,用于接收所述摄像头拍摄的眼部图像,并从中识别出使用者的眼部动作;
控制单元,与所述图像处理单元相连,用于根据识别出的所述眼部动作生成对应的用于控制代步工具运动的动作指令。
2.根据权利要求1所述的代步工具控制装置,其特征在于,还包括:眼镜,所述摄像头集成在所述眼镜上。
3.根据权利要求2所述的代步工具控制装置,其特征在于,所述摄像头集成在所述眼镜的镜片上。
4.根据权利要求1所述的代步工具控制装置,其特征在于,所述图像处理单元包括:
坐标确定子单元,用于利用人眼的眼白、虹膜和瞳孔之间的灰度值差异,从所述摄像头拍摄的眼部图像中识别出瞳孔并确定瞳孔坐标;
动作确定子单元,用于将所述瞳孔坐标与各预设样片中的瞳孔坐标进行一一比对,判断所述瞳孔坐标与所述预设样片中的瞳孔坐标的差值是否在预设范围内,如果在预设范围内,则确定使用者做出了预设样片中的眼部动作,所述预设样片为预先拍摄的使用者的眼部动作图像。
5.根据权利要求1-4任一项所述的代步工具控制装置,其特征在于,还包括:
动作准备单元,与所述图像处理单元相连,用于在所述图像处理单元识别出使用者的眼部动作,且通过所述图像处理单元接收使用者输入的本次眼控开始指令之后,判断代步工具的当前状态是否处于预设的动作准备状态,并在判断结果为否时,生成动作准备指令,所述动作准备指令用于指示所述代步工具从当前状态调整为动作准备状态,代步工具处于所述动作准备状态时,适合执行所述眼部动作对应的动作指令。
6.根据权利要求1-4任一项所述的代步工具控制装置,其特征在于,还包括:
提示单元,用于在所述图像处理单元识别出使用者的眼部动作之后,提示使用者是否执行所述眼部动作对应的动作指令;
发送单元,用于在接收使用者的确认执行指令后,将所述动作指令发送至代步工具的电机驱动器
7.根据权利要求6所述的代步工具控制装置,其特征在于,还包括:
动作结束单元,用于接收使用者输入的本次眼控结束指令,并根据所述本次眼控结束指令生成用于指示所述代步工具停止并关闭所述发送单元的动作结束指令。
8.根据权利要求1所述的代步工具控制装置,其特征在于,所述使用者的眼部动作包括:眨眼和向左、向右、向上、向下看。
9.根据权利要求1所述的代步工具控制装置,其特征在于,还包括:通信模,用于将所述摄像头拍摄的眼部图像发送给所述图像处理单元。
10.一种代步工具系统,其特征在于,包括:代步工具和权利要求1-9任一项所述的代步工具控制装置,所述代步工具包括全方位轮、驱动所述全方位轮的驱动电机以及控制所述驱动电机的电机驱动器;
所述代步工具控制装置的动作指令输出端与所述电机驱动器相连。
11.根据权利要求10所述的代步工具系统,其特征在于,所述全方位轮为麦克纳姆轮。
12.根据权利要求10或11所述的代步工具系统,其特征在于,还包括:
停止按钮,用于接收输入的强行停止指令;
安全控制板,与所述停止按钮和所述电机驱动器相连,用于在接收到所述强行停止指令时,向所述电机驱动器发送关闭所述驱动电机的指令。
13.一种代步工具控制方法,其特征在于,包括:
拍摄使用者的眼部图像;
通过图像处理,从拍摄的眼部图像中识别出使用者的眼部动作;
根据识别出的所述眼部动作生成对应的用于控制代步工具运动的动作指令。
14.根据权利要求13所述的控制方法,其特征在于,所述通过图像处理,从拍摄的眼部图像中识别出使用者的眼部动作之后,所述根据识别出的所述眼部动作生成对应的用于控制代步工具运动的动作指令之前,还包括:
接收使用者输入的本次眼控开始指令,并在接收所述本次眼控开始指令之后,判断代步工具的当前状态是否处于预设的动作准备状态,并在判断结果为否时,生成动作准备指令,所述动作准备指令用于指示所述代步工具从当前状态调整为动作准备状态,代步工具处于所述动作准备状态时,适合执行所述眼部动作对应的动作指令。
15.根据权利要求13或14所述的控制方法,其特征在于,所述根据识别出的所述眼部动作生成对应的用于控制代步工具运动的动作指令之后,还包括:
提示使用者是否执行所述眼部动作对应的动作指令;
待接收到使用者输入的确认执行指令后,将所述动作指令发送至代步工具的电机驱动器。
16.根据权利要求15所述的控制方法,其特征在于,所述接收使用者的确认执行指令后,将所述动作指令发送至代步工具的电机驱动器之后,还包括:
接收使用者输入的本次眼控结束指令,并根据所述本次眼控结束指令生成用于指示所述代步工具停止并停止向所述代步工具发送动作指令的动作结束指令。

说明书全文

代步工具的控制方法和控制装置、代步工具系统

技术领域

[0001] 本发明涉及控制领域,尤其涉及一种代步工具控制方法和控制装置、代步工具系统。

背景技术

[0002] 现有的轮椅,用户通常需要用手或脚推动,或者采用电驱动并通过按压按键的方法来进行控制,这对于肢体不便的人士而言比较困难,例如渐冻症患者,既无法使用手脚,也无法发声,根本无法使用现有轮椅。因此,目前急需一种无需使用腿、臂或手等身体部位的动作即可进行操作的轮椅。

发明内容

[0003] 本发明提供一种代步工具控制方法和控制装置、代步工具系统,无需使用腿、臂或手等身体部位的动作即可进行操作,解决了现有代步工具对于肢体不便人士操作困难的问题。
[0004] 为达到上述目的,本发明的实施例采用如下技术方案:
[0005] 本发明的实施例提供一种代步工具控制装置,包括:摄像头,用于拍摄使用者的眼部图像;图像处理单元,与所述摄像头相连,用于接收所述摄像头拍摄的眼部图像,并从中识别出使用者的眼部动作;控制单元,用于根据识别出的所述眼部动作生成对应的用于控制代步工具运动的动作指令。
[0006] 可选地,还包括:眼镜,所述摄像头集成在所述眼镜上。
[0007] 优选地,所述摄像头集成在所述眼镜的镜片上。
[0008] 可选地,所述图像处理单元包括:坐标确定子单元,用于利用人眼的眼白、虹膜和瞳孔之间的灰度值差异,从所述摄像头拍摄的眼部图像中识别出瞳孔并确定瞳孔坐标;动作确定子单元,用于将所述瞳孔坐标与各预设样片中的瞳孔坐标进行一一比对,判断所述瞳孔坐标与所述预设样片中的瞳孔坐标的差值是否在预设范围内,如果在预设范围内,则确定使用者做出了预设样片中的眼部动作,所述预设样片为预先拍摄的使用者的眼部动作图像。
[0009] 可选地,所述的代步工具控制装置,还包括:动作准备单元,与所述图像处理单元相连,用于在所述图像处理单元识别出使用者的眼部动作,且通过所述图像处理单元接收使用者输入的本次眼控开始指令之后,判断代步工具的当前状态是否处于预设的动作准备状态,并在判断结果为否时,生成动作准备指令,所述动作准备指令用于指示所述代步工具从当前状态调整为动作准备状态,代步工具处于所述动作准备状态时,适合执行所述眼部动作对应的动作指令。
[0010] 可选地,所述代步工具控制装置,还包括:提示单元,用于在所述图像处理单元识别出使用者的眼部动作之后,提示使用者是否执行所述眼部动作对应的动作指令;发送单元,用于在接收使用者的确认执行指令后,将所述动作指令发送至代步工具的电机驱动器
[0011] 可选地,所述代步工具控制装置,还包括:动作结束单元,用于接收使用者输入的本次眼控结束指令,并根据所述本次眼控结束指令生成用于指示所述代步工具停止并关闭所述发送单元的动作结束指令。
[0012] 可选地,所述使用者的眼部动作包括:眨眼和向左、向右、向上、向下看。
[0013] 可选地,所述代步工具控制装置,还包括:通信模,用于将所述摄像头拍摄的眼部图像发送给所述图像处理单元。
[0014] 本发明的实施例还提供一种代步工具系统,包括:代步工具和任一项所述的代步工具控制装置,所述代步工具包括全方位轮、驱动所述全方位轮的驱动电机以及控制所述驱动电机的电机驱动器;所述代步工具控制装置的动作指令输出端与所述电机驱动器相连。
[0015] 优选地,所述全方位轮为麦克纳姆轮。
[0016] 进一步地,所述代步工具系统还包括:停止按钮,用于接收输入的强行停止指令;安全控制板,与所述停止按钮和所述电机驱动器相连,用于在接收到所述强行停止指令时,向所述电机驱动器发送关闭所述驱动电机的指令。所述停止按钮可以设置在代步工具上,例如轮椅的扶手或者靠背上,也可以设置在其它方便操作的地方,本实施例不做限定。
[0017] 本发明的实施例提供一种代步工具控制方法,包括:拍摄使用者的眼部图像;通过图像处理,从拍摄的眼部图像中识别出使用者的眼部动作;根据识别出的所述眼部动作生成对应的用于控制代步工具运动的动作指令。
[0018] 可选地,所述通过图像处理,从拍摄的眼部图像中识别出使用者的眼部动作之后,所述根据识别出的所述眼部动作生成对应的用于控制代步工具运动的动作指令之前,还包括:接收使用者输入的本次眼控开始指令,并判断代步工具的当前状态是否处于预设的动作准备状态,并在判断结果为否时,生成动作准备指令,所述动作准备指令用于指示所述代步工具从当前状态调整为动作准备状态,代步工具处于所述动作准备状态时,适合执行所述眼部动作对应的动作指令。
[0019] 可选地,所述根据识别出的所述眼部动作生成对应的用于控制代步工具运动的动作指令之后,还包括:提示使用者是否执行所述眼部动作对应的动作指令;待接收到使用者输入的确认执行指令后,将所述动作指令发送至代步工具的电机驱动器。
[0020] 可选地,所述接收使用者的确认执行指令后,将所述动作指令发送至代步工具的电机驱动器之后,还包括:接收使用者输入的本次眼控结束指令,并根据所述本次眼控结束指令生成用于指示所述代步工具停止并停止向所述代步工具发送动作指令的动作结束指令。
[0021] 本发明提供一种代步工具控制方法和控制装置、代步工具系统,所述代步工具控制装置包括:摄像头、图像处理单元和控制单元,通过摄像头拍摄使用者的眼部图像,图像处理单元接收摄像头拍摄的眼部图像并从中识别出使用者的眼部动作,然后由控制单元根据识别出的眼部动作生成对应的用于控制代步工具运动的动作指令,可以由眼部动作控制操作代步工具,无需使用腿、臂或手等身体部位的动作,解决了现有代步工具对于肢体不便人士操作困难的问题。所述代步工具可以是轮椅等。附图说明
[0022] 为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。
[0023] 图1为本发明实施例一提供的一种代步工具控制装置的结构框图
[0024] 图2为本发明实施例一中眼镜结构示意图;
[0025] 图3为本发明实施例一中第一种实施方式提供的代步工具控制装置结构框图;
[0026] 图4为本发明实施例一中预先拍摄的使用者直视前方时的眼部动作示意图;
[0027] 图5为本发明实施例一中预先拍摄的使用者向左看的预设样片;
[0028] 图6为本发明实施例一中第二种实施方式提供的代步工具控制装置结构框图;
[0029] 图7为本发明实施例一中第三种实施方式提供的代步工具控制装置结构框图;
[0030] 图8为本发明实施例一中第四种实施方式提供的代步工具控制装置结构框图;
[0031] 图9为本发明实施例一中提供的一种代步工具系统的结构框图;
[0032] 图10为本发明实施例二中提供的一种轮椅系统的结构示意图;
[0033] 图11为本发明实施例二中提供的轮椅系统的硬件连接示意图;
[0034] 图12为本发明实施例二中提供的轮椅系统的工作流程图
[0035] 图13为本发明实施例二中轮椅实现主要移动时各麦克纳姆轮配合运动的示意图。

具体实施方式

[0036] 下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
[0037] 实施例一
[0038] 本发明的实施例提供一种代步工具控制装置,如图1所示,该代步工具控制装置包括:摄像头11,用于拍摄使用者的眼部图像;图像处理单元12,与摄像头11相连,用于接收摄像头11拍摄的眼部图像,并从中识别出使用者的眼部动作;控制单元13,用于根据识别出的眼部动作生成对应的用于控制代步工具运动的动作指令。
[0039] 本实施例提供的代步工具控制装置,可以预设一些眼部动作并建立眼部动作与对代步工具操作的对应关系并存储,示例性地,以轮椅为例可以如下表所示:预设的使用者的眼部动作可以包括:眨眼和向左、向右、向上、向下看,并且,向左看对应的轮椅操作为轮椅左转,向右看对应的轮椅操作为轮椅右转,向上看对应轮椅前进,向下看对应轮椅后退,眨眼一次表示指令确认,连续眨眼两次表示轮椅停止,连续眨眼三次表示开始启动本次眼控操作等等。可以理解的是,使用者的眼部动作具体包括哪些眼部动作以及眼部动作与轮椅操作动作的对应关系不做具体限定,实际运用时可以根据实际情况进行设置。另外,可以在出厂前预设,也可以在使用时由用户进行自定义。本实施例所述代步工具不限于轮椅,还可以是平衡车、电动独轮车等。
[0040]眼睛动作 轮椅操作
向左看 左转
向右看 左转
向上看 前进
向下看 后退
眨眼1次 确认
眨眼2次 停止
眨眼3次 启动
[0041] 以轮椅为例,上述控制装置具体工作时,使用摄像头11拍摄使用者的眼部图像,摄像头11拍摄的眼部图像通过有线或无线的方式传输给图像处理单元12,图像处理单元12通过图像处理从中识别出使用者的眼部动作,然后由控制单元13通过查询预设的眼部动作与轮椅操作动作的对应关系表,由此生成使轮椅产生对应动作的动作指令。例如,通过图像处理识别出使用者的眼部动作为向左看,则控制单元13生成指示轮椅左转的动作指令并传递给轮椅的动力机构,以实现轮椅的左转操作。
[0042] 通过本实施例提供的代步工具控制装置,可以实现由眼部动作控制操作代步工具,无需使用腿、臂或手等身体部位的动作,解决了现有代步工具对于肢体不便人士操作困难的问题。
[0043] 如图2所示,上述代步工具控制装置还可还包括:眼镜,上述的摄像头11集成在眼镜上,一方面便于使用者佩戴,另一方面还可以遮挡使用者对代步工具操作时的眼部动作,避免引起他人的好奇心及关注。一种优选实施方式如图2所示,将摄像头11集成在眼镜的镜片上,同时在眼镜上摄像头11旁边的位置集成通信模块(例如蓝牙无线模块111)以及电源模块(例如电池131),电源模块为摄像头11和通信模块提供电力,摄像头11拍摄的眼部图像通过通信模块发送给图像处理单元12。
[0044] 如图3所示,在本实施例的第一种实施方式中,上述的图像处理单元12包括:坐标确定子单元121,用于利用人眼的眼白、虹膜和瞳孔之间的灰度值差异,从摄像头11拍摄的眼部图像中识别出瞳孔并确定瞳孔坐标;动作确定子单元122,用于将瞳孔坐标与各预设样片中的瞳孔坐标进行一一比对,判断瞳孔坐标与预设样片中的瞳孔坐标的差值是否在预设范围内,如果在预设范围内,则确定使用者做出了预设样片中的眼部动作,预设样片为预先拍摄的使用者的眼部动作图像。
[0045] 通过图像处理识别出瞳孔并确定瞳孔坐标,对本领域的技术人员而言,一般比较容易实现,下面仅示例性地简单叙述:步骤一、摄像头11所拍摄的眼部图像主要是人眼的眼白、虹膜、瞳孔等部分,利用三者之间灰度值差异,实现瞳孔定位。为此,可以先利用最大类间方差法对图片进行分割,实现二值化,确定虹膜外边缘,随后,用灰度投影方法确定虹膜中心坐标,最后利用基于圆的霍夫变换以及最小二乘法确认瞳孔中心位置(确定出瞳孔坐标);步骤二、将步骤一确定出的瞳孔坐标与各预设样片中的瞳孔坐标进行一一比对,预设样片为使用者在首次使用时的调试阶段预先拍摄的眼部动作图像。
[0046] 例如,如图4所示,为预先拍摄的使用者直视前方时的眼部动作,规定此时瞳孔坐标为坐标原点;图5为预先拍摄的使用者向左看的预设样片。当眼球向左转动,即向左看时,瞳孔相对位置由中心原点向左侧偏移,同理,当向右、上、下转动时,瞳孔位置也发生相应偏移,瞳孔颜色相对较深,步骤一中可以通过图像分析的方法准确识别出瞳孔在整个眼球中的位置。步骤二中将步骤一确定出的瞳孔坐标与预设样片一一比对,其中如果将步骤一确定出的瞳孔坐标与图5所示向左看的预设样片比对时,步骤一确定出的瞳孔坐标在图5中虚线所示的范围内,即认为步骤一确定出的瞳孔坐标与预设样片中的瞳孔坐标的差值在预设范围内,则使用者的眼部动作确定为向左看。
[0047] 如图6所示,在本实施例的第二种实施方式中,所述代步工具控制装置,还包括动作准备单元14,与图像处理单元12相连,用于在图像处理单元12识别出使用者的眼部动作且通过图像处理单元12接收使用者输入的本次眼控开始指令之后,判断代步工具的当前状态是否处于预设的动作准备状态,并在判断结果为否时,生成动作准备指令,所述动作准备指令用于指示所述代步工具从当前状态调整为动作准备状态,代步工具处于动作准备状态时,适合执行上述眼部动作对应的动作指令。
[0048] 对代步工具进行眼部动作所代表的操作动作前,需要确认代步工具的当前状态如何,是否适合进行该操作动作,如果不适合,需要现将代步工具当前状态进行调整,使之处于能够安全地进行该操作动作的动作准备状态,避免出现安全事故。动作准备状态预先设置,依据要执行的动作指令而不同。例如,以轮椅为例,如果轮椅当前处于较高速度的前进状态,操作者通过眼部动作指示轮椅左转,这时提示操作者“本次眼控是否开始?”,待操作者通过眼部动作(例如眨眼一次)输入本次眼控开始指令,通过摄像头11拍摄、图像处理单元12图像处理后,动作准备单元14接收到使用者输入的本次眼控开始指令,判断轮椅的当前状态速度过高,不适宜进行左转(即判断轮椅当前未处于动作准备状态),此时生成动作准备指令,动作准备指令指示轮椅降低速度或停止运动,为执行眼部动作所代表的轮椅左转指令做准备,避免高速左转引发事故。代步工具可实时反馈或记录前一动作执行结果,获得代步工具的当前状态,动作准备单元14如果判断代步工具的当前状态适合进行眼部动作所对应的动作指令,这时可不生成动作准备指令,直接进行下一步操作。代步工具的当前状态包括但不限于代步工具目前的行驶速度、前进方向以及代步工具各轮子的度等。
[0049] 如图7所示,在本实施例的第三种实施方式中,在上一实施方式的基础上还进一步包括:提示单元15,用于在图像处理单元12识别出使用者的眼部动作之后,提示使用者是否执行眼部动作对应的动作指令;发送单元16,用于在接收使用者的确认执行指令后,将动作指令发送至代步工具的电机驱动器。提示单元15可以采用语音、画面等提示方式,通过提示单元15进行提示,发送单元16接收到使用者的确认执行指令后,再将动作指令发送的方式,实现动作指令在发送前均可撤回,可以避免误操作,提高安全性。
[0050] 如图8所示,在本实施例的第四种实施方式中,在上一实施方式的基础上还进一步包括:动作结束单元17,用于接收使用者输入的本次眼控结束指令,并根据本次眼控结束指令生成用于指示代步工具停止并关闭发送单元16的动作结束指令。在使用者输入本次眼控结束指令后,动作结束单元17指示代步工具停止并关闭发送单元16,可以防止误操作。
[0051] 上述的本次眼控开始指令、确认执行指令以及本次眼控结束指令均可以通摄像头拍摄使用者的眼部图像,经图像处理单元进行图像识别而获得。
[0052] 通过本实施例提供的代步工具控制装置,可以实现由眼部动作控制操作轮椅等代步工具,无需使用腿、臂或手等身体部位的动作,解决了现有代步工具对于肢体不便人士操作困难的问题;同时安全性有保证,并可防止误操作。
[0053] 本发明的实施例还提供一种代步工具系统,该代步工具系统包括:代步工具和上述任一项所述的代步工具控制装置,代步工具以轮椅为例,如图9所示,轮椅20包括全方位轮23、驱动全方位轮23的驱动电机22以及控制驱动电机22的电机驱动器21;控制装置10的动作指令输出端与电机驱动器21相连,此处的相连控制装置10与电机驱动器21之间可以通信,包括有线和无线方式,例如无线方式可以通过无线适配器实现。本实施例提供的轮椅等代步工具系统,可以实现眼部动作控制,无需使用腿、臂或手等身体部位的动作,解决了现有轮椅对于肢体不便人士操作困难的问题。
[0054] 进一步地,上述代步工具还可包括:停止按钮,用于接收输入的强行停止指令;安全控制板,与停止按钮和电机驱动器21相连,用于在接收到强行停止指令时,向电机驱动器21发送关闭驱动电机的指令。乘坐者一般为肢体不便人士,如果出现意外情况需要停止代步工具,通过眼部动作操作比较慢,这时可以由看护者按下停止按钮进行紧急制动
[0055] 实施例二
[0056] 本发明的实施例还提供一种代步工具控制方法,包括:步骤一、拍摄使用者的眼部图像;步骤二、通过图像处理,从拍摄的眼部图像中识别出使用者的眼部动作;步骤三、根据识别出的所述眼部动作生成对应的用于控制代步工具运动的动作指令。
[0057] 本实施例提供的代步工具控制方法,拍摄眼部图像,然后通过图像处理从图像中识别出使用者的眼部动作并转化控制代步工具运动的动作指令,可以实现用眼部动作来控制操作代步工具,无需使用腿、臂或手等身体部位的动作,解决了现有轮椅对于肢体不便人士操作困难的问题。
[0058] 进一步地,上述步骤三之前,还包括:接收使用者输入的本次眼控开始指令,并在接收本次眼控开始指令之后,判断代步工具的当前状态是否处于预设的动作准备状态,并在判断结果为否时,生成动作准备指令,所述动作准备指令用于指示代步工具从当前状态调整为动作准备状态,代步工具处于动作准备状态时,适合执行眼部动作对应的动作指令。动作准备指令指示代步工具降低速度或停止运动,为执行眼部动作所代表的代步工具左转指令做准备,避免高速左转引发事故。
[0059] 步骤三之后,还可包括:步骤四、提示使用者是否执行眼部动作对应的动作指令;待接收到使用者输入的确认执行指令后,将动作指令发送至代步工具的电机驱动器。待使用者确认后,再将动作指令发送,在动作指令发送前均可撤回动作指令,可以避免误操作,提高安全性。
[0060] 本实施例提供的代步工具控制方法还包括:步骤五、接收使用者输入的本次眼控结束指令,并根据所述本次眼控结束指令生成用于指示代步工具停止并停止向代步工具发送动作指令的动作结束指令。
[0061] 为了本领域技术人员更好的理解本发明实施例提供的代步工具及其控制方法,下面通过具体的实施例对本发明提供的方案进行详细说明。
[0062] 如图10和图11所示,本发明实施例提供一种轮椅系统,轮椅系统由眼镜18和轮椅组成,眼镜上集成了摄像头11和蓝牙无线模块111以及电池131,可实时拍摄并发送眼部图像,轮椅包括座椅24,安装在座椅24底部的全方位轮23(一般为四个)以及轮毂电机221、电机驱动器21,还包括设置在座椅24上的处理器19、存储器(图中未示出)和蓝牙无线模块111-2、语音提示模块151、电源模块以及空气开关等。轮椅可实时接收眼部图像并通过图像分析算法识别出眼部动作,同时处理器19根据眼部动作发出对应指令,控制全方位轮23转动调整方向,以及控制轮椅前、后移动以及其它动作。本领域技术人员可以理解的是,处理器19通过执行设定好的软件程序,可以实现实施例一中图像处理单元12、控制单元13、动作准备单元14和动作结束单元17的功能,以及发送单元部分16的部分功能。
[0063] 示例性地,本实施例眼控轮椅根据眼部动作和轮椅操作的对应关系如实施例一中表1所示,表,眼睛向左、右、上、下看分别对应轮椅左、右、前、后移动,眨眼1、2、3次分别对应确定、停止、启动,支持自定义设置。
[0064] 如此,如图12所示,本实施例轮椅系统工作原理如下:用户佩戴集成了摄像头11的眼镜,启动后,摄像头11以每秒10次的速度(该速度可以人为设定)实时拍摄眼部图像,并通过蓝牙无线方式将图像发送到轮椅上的处理器19,处理器19实时处理图像并识别出眼部动作。用户控制轮椅前,需要连续眨眼3次以获取控制权限。当用户转动眼睛向左、或向右、或向上、或向下看1次时,系统结合眼动识别结果和操作对应表,以语音方式给出是否向左、或向右、或向前、或向后移动的提示,用户再眨眼一次,进行确认,然后轮椅开始执行识别眼部动作对应的操作。持续直至用户需要停止时,连续眨眼两次即可该结束对轮椅的控制过程。
[0065] 需要注意的是,针对同一动作指令,各全方位轮23最后的动作并不相同。
[0066] 本实施例中的全方位轮23优选麦克纳姆轮(Mecanum轮)。麦克纳姆轮,又称万向轮,该轮在传统车轮的基础上,在轮缘上再沿与轴成α角(一般为45°)方向分布着许多可自由旋转的小辊子(即辊轮),这样在车轮(即中心轮)滚动时,小辊子就会产生侧向运动,通过轮椅的4个麦克纳姆轮的相互配合,使得系统能够实现平面内的全方位移动,除此以外该轮组成的系统具有承载能力强、结构简洁、运动控制灵活、通过性好等优点,适合在轮椅上安装。
[0067] 如图13所示,以麦克纳姆轮为例,示出配备麦克纳姆轮的轮椅实现主要移动时,各轮配合运动的情况:前进时,各轮(轮椅的四个麦克纳姆轮)均向前转动;后退时,各轮均向后转动;右行时,前左轮和后右轮向前转动,同时前右轮和后左轮向后转动;左行时,前左轮和后右轮向后转动,同时前右轮和后左轮向前转动;顺时针转动时,前左轮和后左轮向前转动,同时前右轮和后右轮向后转动;逆时针转动时,前左轮和后左轮向后转动,同时前右轮和后右轮向前转动;向右前方行进时,前左轮和后右轮向前转动,同时前右轮和后左轮不转动;向左前方行进时,前右轮和后左轮向前转动,同时前左轮和后右轮不转动。上述各轮的向前、向后转动情况均指对应麦克纳姆轮的中心轮转动方向。
[0068] 麦克纳姆轮的辊轮可各自独立的进行转动,在麦克纳姆轮转动时,合速度为垂直于辊子方向,并可将其分解为前进、横行两个方向。下面以右行运动为例进行简单介绍,图13右行图中轮子旁边的箭头方向分别代表各麦克纳姆轮转动方向(更具体为麦克纳姆轮的中心轮转动方向),对各轮按前进和横行两个方向为基础做速度分解,可以发现,前进方向的速度被抵消,仅剩横向(右侧)速度,因此,该车体可以实现向右侧的运动。这是本领域的公知常识,不再一一详述。
[0069] 本实施例提供的轮椅通过监测和识别眼部动作(包括眨眼和眼球移动),实现对轮椅的控制;轮椅采用了全方位轮,通过特定的眼球动作,通过各个轮之间的运动配合,实现轮椅在转弯半径为零的情况下,实现对轮椅运动方向的控制,具体控制原理为:利用拍摄建立的样本(即预设样片)与用户实时眼部运动做比对,通过对比瞳孔中心坐标变化,语音提示用户是否会采取该动作,用户确认后,再由处理器发出指令,经由电机驱动器,分别控制各电机运动,从而控制各全方位轮相互配合,实现眼部动作所对应的动作操作。本实施例中,眼球的左、右、上、下转动可分别对应轮椅的左、右、前、后移动,同时为避免眼球无意转动的干扰,还通过眨眼来确认有效动作。
[0070] 在本发明实施例中,各步骤的序号并不能用于限定各步骤的先后顺序,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,对各步骤的先后变化也在本发明的保护范围之内。
[0071] 本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于设备实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。
[0072] 本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random Access Memory,RAM)等。
[0073] 以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求的保护范围为准。
QQ群二维码
意见反馈