基于手势识别产生交互式虚拟用户界面的方法及相关装置
专利汇可以提供基于手势识别产生交互式虚拟用户界面的方法及相关装置专利检索，专利查询，专利分析的服务。并且本 发明 公开了一种基于 手势识别 产生交互式虚拟 用户界面 的方法及相关装置，该方法包含有：在复数个影像中侦测具有两只手的影像；当侦测到有两只手的影像时，识别两只手的手势；当一只手识别为指向手势且另一只手识别为打开手势时，投影虚拟用户界面物件至该打开手势的手上；追踪该指向手势的手的指尖，用来取得该指尖与该打开手势的手之间的相对 位置 ；判断该指尖与该打开手势的手之间的该相对位置是否符合预设规则；当该指尖与该打开手势的手之间的该相对位置符合该预设规则时，将该指向手势的手的指尖的动作视为点击命令。，下面是基于手势识别产生交互式虚拟用户界面的方法及相关装置专利的具体信息内容。
1.一种基于手势识别产生交互式虚拟用户界面的方法，用于互动系统，其特征在于，该方法包含有：
在复数个影像中侦测具有两只手的影像；
当侦测到有两只手的影像时，识别两只手的手势；
当一只手识别为指向手势且另一只手识别为打开手势时，投影虚拟用户界面物件至该打开手势的手上；
追踪该指向手势的手的指尖，用来取得该指尖与该打开手势的手之间的相对位置；
判断该指尖与该打开手势的手之间的该相对位置是否符合预设规则；以及当该指尖与该打开手势的手之间的该相对位置符合该预设规则时，将该指向手势的手的指尖的动作视为点击命令。
2.根据权利要求1所述的方法，其特征在于，该预设规则包含预设角度或预设距离。
3.根据权利要求1所述的方法，其特征在于，还包含有：
判断该打开手势的手为固定物件；以及
当该打开手势的手移动时，停止投影虚拟用户界面物件。
4.根据权利要求1所述的方法，其特征在于，还包含有：
判断该打开手势的手是否在预设角度，或是否在指向手势的手的一侧；
当判断该打开手势的手在该预设角度或在该指向手势的手的一侧时，判断该打开手势的手为固定物件；
其中，投影该虚拟用户界面物件至该打开手势的手上的步骤包含有当一只手识别为该指向手势且另一只手识别为该打开手势时，投影该虚拟用户界面物件至对应该固定物件的位置上。
5.根据权利要求1所述的方法，其特征在于，在复数个影像中侦测具有两只手的该影像的步骤包含有：
在操作距离中，撷取该复数个影像中的一影像的深度像素；
通过随机决策森林运算将该影像中的所有像素分类为可能的左手群组和右手群组；
将围绕在被检验像素的深度背景作为该随机决策森林运算的输入参考，并输出被检验像素的可能群组；
将该左/右手群组匹配到影像子帧中的连接物件；
计算左/右手的轮廓半径；
裁剪左/右手轮廓；以及
根据该左/右手轮廓，撷取左/右手的深度数据。
6.根据权利要求5所述的方法，其特征在于，当侦测到有两只手的该影像时，识别两只手的手势的步骤包含有：
撷取手的影像子帧；
通过该随机决策森林运算，将该影像子帧中的像素分类为复数个手势群组；以及将包含最多像素的一手势群组设置为手势结果；以及
将包含次多像素的另一手势群组设置为手势参考结果。
7.根据权利要求1所述的方法，其特征在于，还包括以下步骤：
根据点击命令，产生虚拟用户界面物件中对应相对位置的字符物件的影像数据。
8.一种头戴式显示器，用来根据手势识别产生交互式虚拟用户界面，其特征在于，该头戴式显示器包含有：
影像传感器；
处理单元，用来执行程序码；
存储单元，耦接于该处理单元及该影像传感器，用来存储该程序码，其中该程序码指示该处理单元执行以下步骤：
在复数个影像中侦测具有两只手的影像，其中该影像是由该影像传感器所撷取；
当侦测到有两只手的影像时，识别两只手的手势；
当一只手识别为指向手势且另一只手识别为打开手势时，投影虚拟用户界面物件至该打开手势的手上；
追踪该指向手势的手的指尖，用来取得该指尖与该打开手势的手之间的相对位置；
判断该指尖与该打开手势的手之间的该相对位置是否符合预设规则；以及当该指尖与该打开手势的手之间的该相对位置符合该预设规则时，将该指向手势的手的指尖的动作视为点击命令。
9.根据权利要求8所述的头戴式显示器，其特征在于，该预设规则包含预设角度或预设距离。
10.根据权利要求8所述的头戴式显示器，其特征在于，该程序码还指示该处理单元执行以下步骤：
判断该打开手势的手为固定物件；以及
当该打开手势的手移动时，停止投影虚拟用户界面物件。
11.根据权利要求8所述的头戴式显示器，其特征在于，该程序码还指示该处理单元执行以下步骤：
判断该打开手势的手是否在预设角度，或是否在指向手势的手的一侧；以及当判断该打开手势的手在该预设角度或在该指向手势的手的一侧时，判断该打开手势的手为固定物件；
其中，投影该虚拟用户界面物件至该打开手势的手上的步骤包含有当一只手识别为该指向手势且另一只手识别为该打开手势时，投影该虚拟用户界面物件至对应该固定物件的位置上。
12.根据权利要求8所述的头戴式显示器，其特征在于，该程序码还指示该处理单元执行以下步骤：
在操作距离中，撷取该复数个影像中的一影像的深度像素；
通过随机决策森林运算将该影像中的所有像素分类为可能的左手群组和右手群组；
将围绕在被检验像素的深度背景作为该随机决策森林运算的输入参考，并输出被检验像素的可能群组；
将该左/右手群组匹配到影像子帧中的连接物件；
计算左/右手的轮廓半径；
裁剪左/右手轮廓；以及
根据该左/右手轮廓，撷取左/右手的深度数据。
13.根据权利要求12所述的头戴式显示器，其特征在于，在识别两只手的手势的步骤中，当侦测到有两只手的该影像时，该程序码更指示该处理单元执行以下步骤：
撷取手的影像子帧；
通过该随机决策森林运算，将该影像子帧中的像素分类为复数个手势群组；以及将包含最多像素的一手势群组设置为手势结果；以及
将包含次多像素的另一手势群组设置为手势参考结果。
14.根据权利要求8所述的头戴式显示器，其特征在于，还包括一显示装置，且该程序码还指示该处理单元执行以下步骤：
根据该点击命令，产生该虚拟用户界面物件中对应该相对位置的字符物件的影像数据并传送至该显示装置。
15.一种互动系统中的电子装置，用来根据手势识别产生交互式虚拟用户界面，其特征在于，该电子装置包含有：
处理单元，用来执行程序码；
存储单元，耦接于该处理单元，用来存储该程序码，其中该程序码指示该处理单元执行以下步骤：
在复数个影像中侦测具有两只手的影像；
当侦测到有两只手的影像时，识别两只手的手势；
当一只手识别为指向手势且另一只手识别为打开手势时，投影虚拟用户界面物件至该打开手势的手上；
追踪该指向手势的手的指尖，用来取得该指尖与该打开手势的手之间的相对位置；
判断该指尖与该打开手势的手之间的该相对位置是否符合预设规则；以及当该指尖与该打开手势的手之间的该相对位置符合该预设规则时，将该指向手势的手的指尖的动作视为点击命令。
基于手势识别产生交互式虚拟用户界面的方法及相关装置
技术领域
背景技术
发明内容
具体实施方式
2000可以一体地整合在头戴式显示器中。最后，电子装置10可以根据「点击」命令，产生虚拟用户界面物件中对应相对位置的字符物件(如文字或数字)的影像数据，并将影像数据发送至显示装置2000，以向使用者显示字符物件，并且，例如，让使用者确认点击结果是否正确。
| 标题 | 发布/更新时间 | 阅读量 |
|---|---|---|
| 图像获取方法和图像展示方法、装置及设备 | 2020-05-08 | 965 |
| 一种基于深度学习的遥感影像自动标注方法 | 2020-05-08 | 447 |
| 基于深度神经网络的行人步态分割方法 | 2020-05-11 | 701 |
| 一种显示方法、装置、设备和存储介质 | 2020-05-11 | 381 |
| 基于安全帽识别监控系统的配置系统、方法、设备及介质 | 2020-05-08 | 458 |
| 基于多尺度轻量化空洞卷积的光学遥感图像分割方法 | 2020-05-08 | 735 |
| 检测对象的方法、装置、电子设备和存储介质 | 2020-05-11 | 183 |
| 视频中目标物体的跟踪方法、装置、设备及存储介质 | 2020-05-08 | 190 |
| 田间图像中分割油菜花的方法、装置、设备及存储介质 | 2020-05-08 | 296 |
| 基于卫星视频的运动检测方法、装置、设备和存储介质 | 2020-05-08 | 922 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台，是提供专利分析，专利查询，专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据，免费查、免费专利分析。
专利汇分析报告产品可以对行业情报数据进行梳理分析，涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度，系统通过AI智能系统对图表进行解读，只需1分钟，一键生成行业专利分析报告。
