一种AR眼镜及人机交互方法、系统、设备、计算机介质
阅读：1033发布：2020-11-25
专利汇可以提供一种AR眼镜及人机交互方法、系统、设备、计算机介质专利检索，专利查询，专利分析的服务。并且本 申请 公开了一种AR眼镜及 人机交互 方法、系统、设备、计算机介质，AR眼镜包括眼镜主体；安装于眼镜主体上的预设数量的摄像头，摄像头用于拍摄含有用户指向信息的目标图像，预设数量大于等于2；安装于眼镜主体上的AR处理器，AR处理器用于控制AR眼镜发送预设数量的目标图像至AR眼镜连接的外接设备，以使外接设备基于预设数量的目标图像中的用户指向信息确定出用户指向的目标对象。本申请提供的一种AR眼镜，对目标对象的识别准确率高，人机交互效果好。本申请提供的一种AR眼镜人机交互方法、系统、设备及计算机可读存储介质也解决了相应技术问题。，下面是一种AR眼镜及人机交互方法、系统、设备、计算机介质专利的具体信息内容。
1.一种AR眼镜，其特征在于，包括：
眼镜主体；
安装于所述眼镜主体上的预设数量的摄像头，所述摄像头用于拍摄含有用户指向信息的目标图像，所述预设数量大于等于2；
安装于所述眼镜主体上的AR处理器，所述AR处理器用于控制所述AR眼镜发送所述预设数量的所述目标图像至所述AR眼镜连接的外接设备，以使所述外接设备基于所述预设数量的所述目标图像中的所述用户指向信息确定出用户指向的目标对象。
2.根据权利要求1所述的AR眼镜，其特征在于，还包括：
安装于所述眼镜主体上的语音输入设备和语音输出设备；
所述AR处理器还用于：
控制所述AR眼镜发送所述语音输入设备采集的用户语音信息至所述外接设备，以使所述外接设备检索与所述用户语音信息对应的应答信息；
控制所述AR眼镜接收所述外接设备发送的所述应答信息；
控制所述语音输出设备播放所述应答信息。
3.根据权利要求2所述的AR眼镜，其特征在于，还包括：
安装于所述眼镜主体上的投影仪；
所述AR处理器还用于：
接收所述外接设备发送的投影指令，所述投影指令包括所述外接设备解析出所述用户语音信息中的投影需求后发送的指令；
控制所述AR眼镜接收所述外接设备发送的所述目标对象的图像；
控制所述投影仪投影所述目标对象的图像。
4.根据权利要求2所述的AR眼镜，其特征在于，所述AR处理器还用于：
接收所述外接设备发送的目标图像拍摄指令，所述目标图像拍摄指令包括所述外接设备在判定所述用户语音信息与图像相关后发送的指令；
控制所述预设数量的所述摄像头进行拍摄，得到所述目标图像。
5.根据权利要求2所述的AR眼镜，其特征在于，所述AR处理器还用于：
分析所述用户语音信息是否与图像相关，若是，则控制所述预设数量的所述摄像头进行拍摄，得到所述目标图像。
6.根据权利要求4或5所述的AR眼镜，其特征在于，所述预设数量包括2；
所述AR处理器控制所述预设数量的所述摄像头进行拍摄，包括：
所述AR处理器在0.01s的间隔以内分别控制两个所述摄像头进行拍摄。
7.根据权利要求6所述的AR眼镜，其特征在于，所述AR处理器还用于：
接收所述外接设备发送的遮蔽物移除指令；
控制所述语音输出设备播放提醒用户移除所述摄像头摄影范围内遮蔽物的提示语音。
8.一种AR眼镜人机交互方法，其特征在于，应用于如权利要求1至7任一项所述AR眼镜，包括：
调用自身预设数量的摄像头进行拍摄，得到含有用户指向信息的目标图像，所述预设数量大于等于2；
发送所述预设数量的所述目标图像至所述AR眼镜连接的外接设备，以使所述外接设备基于所述预设数量的所述目标图像中的所述用户指向信息确定出用户指向的目标对象。
9.一种AR眼镜人机交互系统，其特征在于，应用于权利要求1至7任一项所述AR眼镜，包括：
第一调用模块，用于调用预设数量的摄像头进行拍摄，得到含有用户指向信息的目标图像，所述预设数量大于等于2；
第一发送模块，用于发送所述预设数量的所述目标图像至所述AR眼镜连接的外接设备，以使所述外接设备基于所述预设数量的所述目标图像中的所述用户指向信息确定出用户指向的目标对象。
10.一种电子设备，其特征在于，包括：
存储器，用于存储计算机程序；
AR处理器，用于执行所述计算机程序时实现如权利要求8所述AR眼镜人机交互方法的步骤。
11.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求8所述AR眼镜人机交互方法的步骤。
一种AR眼镜及人机交互方法、系统、设备、计算机介质
技术领域
[0001] 本申请涉及人机交互技术领域，更具体地说，涉及一种AR眼镜及人机交互方法、系统、设备、计算机介质。
背景技术
[0002] 随着人机交互技术的发展，AR眼镜越来越多的应用在人们的日常生活中，比如看电影、玩游戏、路况导航等。在AR眼镜的应用过程中，有时需要借助AR眼镜来对用户指定对象进行处理，比如识别用户指定对象的类型等。
[0003] 现有的一种AR眼镜识别用户指定对象的方法是：AR眼镜拍摄一幅含有用户指定对象的图像，然后对拍摄得到的图像中的用户指定对象进行识别。
[0004] 然而，现有的一种AR眼镜识别用户指定对象的方法中，当拍摄得到的图像中图像信息过多时，难以在拍摄得到的图像中识别出用户指定对象，人机交互效果差。
[0005] 综上所述，如何提高AR眼镜的人机交互效果是目前本领域技术人员亟待解决的问题。发明内容
[0006] 本申请的目的是提供一种AR眼镜人机交互方法，其能在一定程度上解决如何提高AR眼镜人机交互效果的技术问题。本申请还提供了一种AR眼镜及人机交互系统、设备及计算机存储介质。
[0007] 为了实现上述目的，本申请提供如下技术方案：
[0008] 一种AR眼镜，包括：
[0009] 眼镜主体；
[0010] 安装于所述眼镜主体上的预设数量的摄像头，所述摄像头用于拍摄含有用户指向信息的目标图像，所述预设数量大于等于2；
[0011] 安装于所述眼镜主体上的AR处理器，所述AR处理器用于控制所述AR眼镜发送所述预设数量的所述目标图像至所述AR眼镜连接的外接设备，以使所述外接设备基于所述预设数量的所述目标图像中的所述用户指向信息确定出用户指向的目标对象。
[0012] 优选的，还包括：
[0013] 安装于所述眼镜主体上的语音输入设备和语音输出设备；
[0014] 所述AR处理器还用于：
[0015] 控制所述AR眼镜发送所述语音输入设备采集的用户语音信息至所述外接设备，以使所述外接设备检索与所述用户语音信息对应的应答信息；
[0016] 控制所述AR眼镜接收所述外接设备发送的所述应答信息；
[0017] 控制所述语音输出设备播放所述应答信息。
[0018] 优选的，还包括：
[0019] 安装于所述眼镜主体上的投影仪；
[0020] 所述AR处理器还用于：
[0021] 接收所述外接设备发送的投影指令，所述投影指令包括所述外接设备解析出所述用户语音信息中的投影需求后发送的指令；
[0022] 控制所述AR眼镜接收所述外接设备发送的所述目标对象的图像；
[0023] 控制所述投影仪投影所述目标对象的图像。
[0024] 优选的，所述AR处理器还用于：
[0025] 接收所述外接设备发送的目标图像拍摄指令，所述目标图像拍摄指令包括所述外接设备在判定所述用户语音信息与图像相关后发送的指令；
[0026] 控制所述预设数量的所述摄像头进行拍摄，得到所述目标图像。
[0027] 优选的，所述AR处理器还用于：
[0028] 分析所述用户语音信息是否与图像相关，若是，则控制所述预设数量的所述摄像头进行拍摄，得到所述目标图像。
[0029] 优选的，所述预设数量包括2；
[0030] 所述AR处理器控制所述预设数量的所述摄像头进行拍摄，包括：
[0031] 所述AR处理器在0.01s的间隔以内分别控制两个所述摄像头进行拍摄。
[0032] 优选的，所述AR处理器还用于：
[0033] 接收所述外接设备发送的遮蔽物移除指令；
[0034] 控制所述语音输出设备播放提醒用户移除所述摄像头摄影范围内遮蔽物的提示语音。
[0035] 优选的，所述预设数量的摄像头均匀安装于所述眼镜主体上。
[0036] 优选的，所述AR眼镜的镜架通过铰链方式安装于所述眼镜主体上。
[0037] 优选的，所述眼镜主体包括眼镜横梁、两个连接体和两个挂耳；
[0038] 两个所述连接体分别安装于所述眼镜横梁的两端；
[0039] 两个所述挂耳分别安装于两个所述连接体上。
[0040] 一种AR眼镜人机交互方法，应用于如上任一项所述AR眼镜，包括：
[0041] 调用自身预设数量的摄像头进行拍摄，得到含有用户指向信息的目标图像，所述预设数量大于等于2；
[0042] 发送所述预设数量的所述目标图像至所述AR眼镜连接的外接设备，以使所述外接设备基于所述预设数量的所述目标图像中的所述用户指向信息确定出用户指向的目标对象。
[0043] 一种AR眼镜人机交互系统，应用于如上任一所述AR眼镜，包括：
[0044] 第一调用模块，用于调用预设数量的摄像头进行拍摄，得到含有用户指向信息的目标图像，所述预设数量大于等于2；
[0045] 第一发送模块，用于发送所述预设数量的所述目标图像至所述AR眼镜连接的外接设备，以使所述外接设备基于所述预设数量的所述目标图像中的所述用户指向信息确定出用户指向的目标对象。
[0046] 一种电子设备，包括：
[0048] AR处理器，用于执行所述计算机程序时实现如上所述AR眼镜人机交互方法的步骤。
[0049] 一种AR眼镜人机交互方法，应用于与所述AR眼镜连接的外接设备，包括：
[0050] 接收所述AR眼镜传输的预设数量的目标图像，所述目标图像包括含有用户指向信息的图像，所述预设数量大于等于2；
[0051] 基于所述预设数量的所述目标图像中的所述用户指向信息确定出用户指向的目标对象。
[0052] 优选的，所述基于所述预设数量的所述目标图像中的所述用户指向信息确定出用户指向的目标对象，包括：
[0053] 基于所述预设数量的所述目标图像中的所述用户指向信息确定出用户指向的目标位置；
[0054] 获取所述目标位置处的原始图像，所述原始图像包括不含有遮蔽物信息的图像；
[0055] 在所述原始图像中，将位于所述目标位置处的图像所代表的对象确定为目标对象。
[0056] 一种AR眼镜人机交互系统，应用于与所述AR眼镜连接的外接设备，包括：
[0057] 第一接收模块，用于接收所述AR眼镜传输的预设数量的目标图像，所述目标图像包括含有用户指向信息的图像，所述预设数量大于等于2；
[0058] 第一确定模块，用于基于所述预设数量的所述目标图像中的所述用户指向信息确定出用户指向的目标对象。
[0059] 一种外接设备，包括：
[0060] 存储器，用于存储计算机程序；
[0062] 一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，所述计算机程序被处理器执行时实现如上所述AR眼镜人机交互方法的步骤。
[0063] 一种AR眼镜人机交互设备，包括如上所述AR眼镜及所述外接设备。
[0064] 本申请提供的一种AR眼镜，包括眼镜主体；安装于眼镜主体上的预设数量的摄像头，摄像头用于拍摄含有用户指向信息的目标图像，预设数量大于等于2；安装于眼镜主体上的AR处理器，AR处理器用于控制AR眼镜发送预设数量的目标图像至AR眼镜连接的外接设备，以使外接设备基于预设数量的目标图像中的用户指向信息确定出用户指向的目标对象。本申请提供的一种AR眼镜，AR眼镜上安装有预设数量的摄像头，所以AR眼镜可以拍摄得到预设数量的目标图像，由于摄像头在AR眼镜上的安装位置不同，所以AR眼镜可以拍摄得到不同角度下的含有用户指向信息的目标图像，相应的，外接设备可以根据目标图像中不同角度下的用户指向信息对目标对象进行准确识别，与基于一幅图像对目标对象进行识别的现有技术相比，识别准确率高，人机交互效果好。本申请提供的一种AR眼镜人机交互方法、系统、设备及计算机可读存储介质也解决了相应技术问题。附图说明
[0065] 为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
[0066] 图1为本申请实施例提供的一种AR眼镜的结构示意图；
[0067] 图2为本申请实施例提供的AR眼镜的另一结构示意图；
[0068] 图3为本申请实施例提供的一种AR眼镜人机交互方法的第一流程图；
[0069] 图4为本申请实施例提供的一种AR眼镜人机交互方法的第二流程图；
[0070] 图5为AR眼镜的AR处理器与外接设备进行信息交互的流程图；
[0071] 图6为AR眼镜拍摄的用户手势与心形图像的位置示意图；
[0072] 图7为本申请实施例提供的一种AR眼镜人机交互系统的结构示意图；
[0073] 图8为本申请实施例提供的一种外接设备的结构示意图；
[0074] 图9为本申请实施例提供的一种外接设备的另一结构示意图。
具体实施方式
[0075] 下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
[0076] 随着人机交互技术的发展，AR眼镜越来越多的应用在人们的日常生活中，比如看电影、玩游戏、路况导航等。在AR眼镜的应用过程中，有时需要借助AR眼镜来对用户指定对象进行处理，比如识别用户指定对象的类型等。现有的一种AR眼镜识别用户指定对象的方法是：AR眼镜拍摄一幅含有用户指定对象的图像，然后对拍摄得到的图像中的用户指定对象进行识别。然而，现有的一种AR眼镜识别用户指定对象的方法中，当拍摄得到的图像中图像信息过多时，难以在拍摄得到的图像中识别出用户指定对象，人机交互效果差。本申请提供的一种AR眼镜可以提高AR眼镜的人机交互效果。
[0077] 请参阅图1，图1为本申请实施例提供的一种AR眼镜的结构示意图。
[0078] 本申请实施例提供的一种AR眼镜，可以包括：
[0079] 眼镜主体101；
[0080] 安装于眼镜主体101上的预设数量的摄像头102，摄像头102用于拍摄含有用户指向信息的目标图像，预设数量大于等于2；
[0081] 安装于眼镜主体上的AR处理器103，AR处理器用于控制AR眼镜发送预设数量的目标图像至AR眼镜连接的外接设备，以使外接设备基于预设数量的目标图像中的用户指向信息确定出用户指向的目标对象。
[0082] 实际应用中，眼镜主体的形状及材质可以根据实际需要确定，比如眼镜主体可以为金属材质、半金属材质等；摄像头的数量可以根据实际需要确定，且摄像头可以优先选择为便于安装的小型摄像头，比如针孔摄像头等；摄像头在眼镜主体上的安装位置可以根据实际需要确定，比如其可以均匀安装在眼镜主体的前表面上，眼镜主体的前表面指的是相对于人眼而言，眼镜主体上远离人眼的表面。应当指出，外接设备识别出目标对象后，可以将目标对象的相应信息传输给AR眼镜进行显示等；外接设备的类型可以根据实际需要确定，比如其可以为服务器、用户安装有相应软件的电脑等。
[0083] 实际应用中，为了便于AR眼镜的携带，本申请提供的AR眼镜的镜架108可以通过铰链方式安装于眼镜主体上，比如通过镜架铰链107安装于眼镜主体上等，这样，当不需要使用AR眼镜时，可以将镜架闭合，减少AR眼镜的存放空间。应当指出，本申请提供的AR眼镜的镜片112可以以嵌入方式固定在镜架上；且AR眼镜与用户鼻梁接触的部件可以由鼻梁架110和软胶111组成等。
[0084] 请参阅图2，图2为本申请实施例提供的AR眼镜的另一结构示意图。具体的，为了便于AR眼镜的佩戴，本申请实施例提供的AR眼镜的眼镜主体可以包括眼镜横梁113、两个连接体114和两个挂耳109；两个连接体分别安装于眼镜横梁的两端；两个挂耳分别安装于两个连接体上。应当指出，连接体的长度可以小于人眼与耳朵间的距离，挂耳用于将AR眼镜固定在人耳上。具体的，本申请提供的AR眼镜还可以包括其他器件，比如通讯器、存储器等，本申请在此不做具体限定。
[0085] 具体的，外接设备基于预设数量的目标图像中的用户指向信息确定出用户指向的目标对象的过程可以具体为：基于预设数量的目标图像中的用户指向信息确定出用户指向的目标位置；获取目标位置处的原始图像，原始图像包括不含有遮蔽物信息的图像；在原始图像中，将位于目标位置处的图像所代表的对象确定为目标对象。外接设备获取的原始图像可以为外接设备预先存储的目标位置处的图像；也可以为外接设备通过指令控制AR眼镜实时拍摄的目标位置处的图像等，比如外接设备可以发送原始图像拍摄指令至AR眼镜，AR处理器接收到原始图像拍摄指令后控制AR眼镜的摄像头对目标位置处进行拍摄，得到原始图像。
[0086] 本申请提供的一种AR眼镜，包括眼镜主体；安装于眼镜主体上的预设数量的摄像头，摄像头用于拍摄含有用户指向信息的目标图像，预设数量大于等于2；安装于眼镜主体上的AR处理器，AR处理器用于控制AR眼镜发送预设数量的目标图像至AR眼镜连接的外接设备，以使外接设备基于预设数量的目标图像中的用户指向信息确定出用户指向的目标对象。本申请提供的一种AR眼镜，AR眼镜上安装有预设数量的摄像头，所以AR眼镜可以拍摄得到预设数量的目标图像，由于摄像头在AR眼镜上的安装位置不同，所以AR眼镜可以拍摄得到不同角度下的含有用户指向信息的目标图像，相应的，外接设备可以根据目标图像中不同角度下的用户指向信息对目标对象进行准确识别，与基于一幅图像对目标对象进行识别的现有技术相比，识别准确率高，人机交互效果好。
[0087] 请参阅图1，本申请实施例提供的一种AR眼镜中，还可以包括：
[0088] 安装于眼镜主体上的语音输入设备104和语音输出设备105；
[0089] 相应的，AR处理器还用于：控制AR眼镜发送语音输入设备采集的用户语音信息至外接设备，以使外接设备检索与用户语音信息对应的应答信息；控制AR眼镜接收外接设备发送的应答信息；控制语音输出设备播放应答信息。
[0090] 实际应用中，以远程教学、远程医疗等应用场景为例，用户可能需要与AR眼镜进行语音交互，比如用户在学习中遇到问题时，可能需要将该问题交由AR眼镜进行解答，或者通过AR眼镜检索相应信息，此时用户可以以语音形式描述相应信息，AR眼镜的语音输入设备采集用户语音信息，AR眼镜的处理器控制AR眼镜传输用户语音信息至外接设备；外接设备可以在自身数据库中检索与用户语音信息对应的应答信息，发送应答信息至AR眼镜；AR眼镜的AR处理器再控制AR眼镜的语音输出设备将应答信息播放给用户。具体的，语音输入设备可以为麦克风等，语音输出设备可以为耳机等，其均可以根据实际需要确定。应当指出，外接设备未能在自身数据库中检索出与用户语音信息对应的应答信息时，可以发送信息补充指令至AR眼镜，AR处理器接收到信息补充指令后，可以控制AR眼镜的语音输出设备播放提醒用户补充相应信息的提示语音，以便用户补充提供给AR眼镜的信息。
[0091] 请参阅图1，本申请实施例提供的一种AR眼镜中，还可以包括：
[0092] 安装于眼镜主体上的投影仪106；
[0093] 相应的，AR处理器还可以用于：接收外接设备发送的投影指令，投影指令包括外接设备解析出用户语音信息中的投影需求后发送的指令；控制AR眼镜接收外接设备发送的目标对象的图像；控制投影仪投影目标对象的图像。
[0094] 实际应用中，以远程维修等应用场景为例，用户在使用AR眼镜的过程中，可能存在仅凭AR眼镜播放的应答信息无法解决相应问题的情况，比如用户难以根据AR眼镜播放的应答信息对精密仪器进行操作，此时，为了便于用户借助AR眼镜解决问题，AR眼镜的眼镜主体上可以安装有投影仪，借助投影仪为用户进行精确指示。也即在AR处理器将预设数量的目标图像发送给外接设备后，外接设备基于目标图像识别出目标对象后，可以发送投影指令至AR眼镜，并将目标对象的相应图像，比如带有对目标对象进行标注的渲染图像等，发送给AR眼镜；AR处理器接收到投影指令后控制AR眼镜接收目标对象的图像，并控制投影仪投影目标对象的图像。
[0095] 具体的，用户可以通过语音信息将投影需求通过AR眼镜发送给外接设备，外接设备可以在解析出用户语音信息中的投影需求后发送投影指令至AR眼镜；表示投影需求的用于语音信息可以根据实际需要确实，比如其可以为“请指给我看”、“请投影”等。应当指出，在外接设备未在用户语音信息中解析出投影需求时，外接设备可以不发送投影指令至AR眼镜，AR处理器也不调用AR眼镜的投影仪进行投影操作，投影仪的具体工作方式可以根据实际需要确定。
[0096] 具体应用场景中，用户还可以通过语音信息来控制AR眼镜是否执行拍摄功能。当AR眼镜的AR处理器的功能较弱时，可以是AR眼镜的语音输入设备采集用户语音信息，AR处理器传输用户语音信息至外接设备，外接设备判断用户语音信息是否与图像相关，若是，则发送目标图像拍摄指令至AR眼镜；AR处理器接收外接设备发送的目标图像拍摄指令，控制AR眼镜上预设数量的摄像头进行拍摄，得到目标图像。当AR眼镜的AR处理器的功能较强时，AR眼镜的语音输入设备采集到用户语音信息后，AR处理器可以直接分析用户语音信息是否与图像相关，若是，则控制预设数量的摄像头进行拍摄，得到目标图像。应当指出，用户语音信息与图像相关的判断方式可以根据实际需要确定，比如可以在用户语音信息中包含“图像”时便判定用户语音信息与图像相关，在用户语音信息中包含“看”时便判定用户语音信息与图像相关等。
[0097] 具体的，为了保证AR眼镜的拍摄效果，尽可能的提高人机交互效果，预设数量的摄像头可以均匀安装于眼镜主体上。为了降低AR眼镜的成本及组装复杂度，本申请实施例提供的AR眼镜中摄像头的预设数量可以为2，此时，这两个摄像头可以对称安装于眼镜主体上，本申请所描述的对称可以是对称分布在眼镜主体的对称线的两侧；相应的，为了保证目标图像中用户指向信息的有效性，AR处理器控制预设数量的摄像头进行拍摄时，可以在0.01s的间隔内分别控制两个摄像头进行拍摄；具体的，AR眼镜还可以在接收到目标图像拍摄指令的0.1s以内，以不超过0.01s的间隔分别控制两个摄像头进行拍摄。
[0098] 具体的，在AR眼镜的应用过程中，摄像头拍摄的图像中可能存在遮蔽物，遮蔽物可以根据具体拍摄场景进行定义。以拍摄目标图像且用户指向信息为用户手势为例，当目标图像中的用户手势遮蔽目标对象时，便可以认为用户手势为目标对象的遮蔽物；而当拍摄只包含识别对象的原始图像时，用户指向信息及遮蔽识别对象的信息均为遮蔽物。不难理解，图像中遮蔽物信息的存在会影响对图像的处理结果，比如原始图像中的遮蔽物信息会影响外接设备对原始图像中识别对象的识别准确率，进而影响人机交互结果。所以，为了保证AR眼镜的人机交互结果，AR处理器还用于接收外接设备发送的遮蔽物移除指令；控制语音输出设备播放提醒用户移除摄像头摄影范围内遮蔽物的提示语音。应当指出，AR处理器控制语音输出设备播放提醒用户移除摄像头摄影范围内遮蔽物的提示语音后，便可以控制AR眼镜的摄像头重新进行拍摄，得到相应的拍摄图像，比如在拍摄目标图像的过程中，AR处理器控制语音输出设备播放提醒用户移除摄像头摄影范围内遮蔽物的提示语音后，便可以拍摄得到用户手势不遮挡目标对象的目标图像；而在拍摄原始图像的过程中，AR处理器控制语音输出设备播放提醒用户移除摄像头摄影范围内遮蔽物的提示语音后，便可以得到不含任何遮蔽物信息的原始图像。
[0099] 请参阅图3，图3为本申请实施例提供的一种AR眼镜人机交互方法的第一流程图。
[0100] 本申请实施例提供的一种AR眼镜人机交互方法，应用于如上任一实施例所描述的AR眼镜，可以包括以下步骤：
[0101] 步骤S101：调用自身预设数量的摄像头进行拍摄，得到含有用户指向信息的目标图像，预设数量大于等于2。
[0102] 步骤S102：发送预设数量的目标图像至AR眼镜连接的外接设备，以使外接设备基于预设数量的目标图像中的用户指向信息确定出用户指向的目标对象。
[0103] 关于本实施例的相应描述请参阅上述实施例，本申请在此不再赘述。
[0104] 请参阅图4，图4为本申请实施例提供的一种AR眼镜人机交互方法的第二流程图。
[0105] 本申请实施例提供的一种AR眼镜人机交互方法，应用于如上任一实施例所描述的与AR眼镜连接的外接设备，可以包括以下步骤：
[0106] 步骤S201：接收AR眼镜传输的预设数量的目标图像，目标图像包括含有用户指向信息的图像，预设数量大于等于2。
[0107] 步骤S202：基于预设数量的目标图像中的用户指向信息确定出用户指向的目标对象。
[0108] 实际应用场景中，基于预设数量的目标图像中的用户指向信息确定出用户指向的目标对象的步骤可以具体为：基于预设数量的目标图像中的用户指向信息确定出用户指向的目标位置；获取目标位置处的原始图像，原始图像包括不含有遮蔽物信息的图像；在原始图像中，将位于目标位置处的图像所代表的对象确定为目标对象。
[0109] 关于本实施例中的相应描述可以参数上述实施例，本申请在此不再赘述。
[0110] 为了更详细的描述本申请提供的AR眼镜的使用方法，现以识别对象为心形、圆柱形，用户指向信息为用户手势、目标对象为心形为例，对AR眼镜的使用过程进行描述。请参阅图5和图6，图5为AR眼镜的AR处理器与外接设备进行信息交互的流程图；图6为AR眼镜拍摄的用户手势与心形图像的位置示意图。
[0111] 在此过程中，AR眼镜的AR处理器可以执行以下步骤：
[0112] 步骤S301：调用语音输入设备采集用户的语音信息。
[0113] 步骤S302：传输语音信息至AR眼镜连接的外接设备，接收外接设备判定语音信息与图像相关后发送的目标图像拍摄指令。
[0114] 步骤S303：调用预设数量的摄像头进行拍摄，得到含有用户手势的目标图像；传输目标图像至外接设备。
[0115] 步骤S304：接收外接设备在判定目标图像中用户手势遮挡心形图像后发送的遮蔽物移除指令。
[0116] 步骤S305：控制语音输出设备播放提示用户不要遮挡心形图像的语音，控制预设数量的摄像头重新拍摄目标图像，传输重新拍摄的目标图像至外接设备。
[0117] 步骤S306：接收外接设备发送的原始图像拍摄指令，控制摄像头拍摄不含有遮蔽物信息的原始图像。
[0118] 步骤S307：传输原始图像至外接设备，以使外接设备基于预设数量的目标图像及原始图像确定出用户指向的心形图像。
[0119] 步骤S308：接收外接设备发送的与语音信息对应的应答信息，控制语音输出设备播放应答信息。
[0120] 步骤S309：接收外接设备发送的投影指令，并接收外接设备发送的与心形图像对应的输出图像，控制投影仪投影输出图像。
[0121] 请参阅图7，图7为本申请实施例提供的一种AR眼镜人机交互系统的结构示意图。
[0122] 本申请实施例提供的一种AR眼镜人机交互系统，应用于与如上任一实施例所描述的AR眼镜连接的外接设备，可以包括：
[0123] 第一接收模块201，用于接收AR眼镜传输的预设数量的目标图像，目标图像包括含有用户指向信息的图像，预设数量大于等于2；
[0124] 第一确定模块202，用于基于预设数量的目标图像中的用户指向信息确定出用户指向的目标对象。
[0125] 本申请实施例提供的AR眼镜人机交互系统的相关描述可以参阅上述实施例，本申请在此不做具体限定。
[0126] 请参阅图8，图8为本申请实施例提供的一种外接设备的结构示意图。
[0127] 本申请实施例提供的一种外接设备，包括：
[0128] 存储器301，用于存储计算机程序；
[0129] 中央处理器302，用于执行计算机程序时实现如上任一实施例所描述的应用于外接设备的AR眼镜人机交互方法的步骤。
[0130] 请参阅图9，本申请实施例提供的另一种外接设备中还可以包括：与处理器302连接的输入端口303，用于传输外界输入的命令至处理器302；与处理器302连接的显示单元304，用于显示处理器302的处理结果至外界；与处理器302连接的通信模块305，用于实现外接设备与外界的通信。显示单元304可以为显示面板、激光扫描使显示器等；通信模块305所采用的通信方式包括但不局限于移动高清链接技术(HML)、通用串行总线(USB)、高清多媒体接口(HDMI)、无线连接：无线保真技术(WiFi)、蓝牙通信技术、低功耗蓝牙通信技术、基于IEEE802.11s的通信技术。
[0131] 本申请实施例提供的一种计算机可读存储介质，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如上任一实施例所描述的应用于外接设备的AR眼镜人机交互方法的步骤。
[0132] 本申请所涉及的计算机可读存储介质包括随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质。
[0133] 本申请还提供了一种AR眼镜人机交互设备，包括如上任一实施例所描述的AR眼镜及外接设备，且AR眼镜和外接设备相连接。
[0134] 本申请实施例提供的一种AR眼镜人机交互方法、系统、设备及计算机可读存储介质中相关部分的说明请参见本申请实施例提供的一种AR眼镜中对应部分的详细说明，在此不再赘述。另外，本申请实施例提供的上述技术方案中与现有技术中对应技术方案实现原理一致的部分并未详细说明，以免过多赘述。
[0135] 还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
[0136] 对所公开的实施例的上述说明，使本领域技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其它实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
| 标题 | 发布/更新时间 | 阅读量 |
|---|---|---|
| 一种智能巡检眼镜 | 2020-05-14 | 890 |
| 检眼镜 | 2020-05-11 | 355 |
| 检眼镜附件 | 2020-05-11 | 1010 |
| 一种双目检眼镜 | 2020-05-11 | 681 |
| 激光扫描检眼镜 | 2020-05-11 | 95 |
| 广角检眼镜操作支架 | 2020-05-13 | 222 |
| 无透镜检眼镜 | 2020-05-12 | 121 |
| 在检眼镜中的改进和与检眼镜有关的改进 | 2020-05-14 | 685 |
| 一种基于眼镜的眨眼检测方法及眼镜 | 2020-05-12 | 420 |
| 共焦线扫描检眼镜 | 2020-05-12 | 851 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台，是提供专利分析，专利查询，专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据，免费查、免费专利分析。
分析报告
专利汇分析报告产品可以对行业情报数据进行梳理分析，涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度，系统通过AI智能系统对图表进行解读，只需1分钟，一键生成行业专利分析报告。
检眼镜热门专利
QQ群二维码
意见反馈
意见反馈