人机交互系统及其方法、终端设备专利检索-权利要求国际申请第I章专利权专利检索查询-专利查询网

人机交互系统及其方法、终端设备

阅读：283发布：2021-04-13

专利汇可以提供人机交互系统及其方法、终端设备专利检索，专利查询，专利分析的服务。并且本发明公开了一种人机交互系统及其方法、终端设备，所述人机交互系统包括：一显示设备；以及一终端设备，所述终端设备通过一连接线与所述显示设备连接；其中，所述显示设备通过USB-TP连接协议与终端设备相互通信，以在所述显示设备上投射所述终端设备的显示屏所输出的显示内容。本发明中通过显示设备通过USB-TP连接协议与终端设备相互通信，并在所述显示设备上投射所述终端设备的显示屏所输出的显示内容。，下面是人机交互系统及其方法、终端设备专利的具体信息内容。

权利要求

1.一种人机交互系统，其特征在于，包括：
一显示设备；以及
一终端设备，所述终端设备通过一连接线与所述显示设备连接；
其中，所述显示设备通过USB-TP连接协议与终端设备相互通信，以在所述显示设备上投射所述终端设备的显示屏所输出的显示内容。
2.根据权利要求1所述的人机交互系统，其特征在于，所述显示设备包括一头部追踪模块，用于获取所述显示设备的移动路径。
3.根据权利要求2所述的人机交互系统，其特征在于，所述显示设备包括一模拟显示屏触摸模块，与所述头部追踪模块连接，用于获取所述显示设备中的感应光标的移动路径。
4.根据权利要求1所述的人机交互系统，其特征在于，所述终端设备包括一显示屏触摸模块，用于获取用户触摸所述终端设备的显示屏的触摸路径，并传送至所述显示装置。
5.根据权利要求4所述的人机交互系统，其特征在于，所述终端设备还包括一语音识别模块，与所述显示屏触摸模块连接，所述语音识别模块用于将用户的语音转换为文本。
6.根据权利要求1所述的人机交互系统，其特征在于，所述连接线为USB Type-C线或DP线。
7.一种人机交互方法，所述人机交互方法是基于权利要求1-6所述人机交互系统的方法，其特征在于，包括以下步骤：
检测是否连接至显示设备；
当检测到连接至显示设备时，获取用户触摸终端设备的显示屏的触摸路径；
当所述触摸路径位于所述终端设备显示屏中部的直线时，显示所述终端设备的显示屏的主界面；
当所述触摸路径位于所述终端设备显示屏两侧的直线时，显示所述终端设备的显示屏的当前显示界面的上一个显示界面；以及
当所述触摸路径为折线时，激活所述显示设备中的感应光标。
8.根据权利要求7所述的人机交互方法，其特征在于，在当所述触摸路径为折线时激活所述显示设备中的感应光标步骤之后，所述方法还包括步骤：
检测用户触摸所述终端设备的显示屏的压力值是否大于预设值；当检测到用户触摸所述终端设备的显示屏的压力值大于预设值时，开启语音识别服务；以及当检测到用户触摸终端设备显示屏的压力值不大于预设值时，关闭语音识别服务。
9.根据权利要求7所述的人机交互方法，其特征在于，当检测到连接至显示设备，所述方法还包括步骤：
显示设备获取所述显示设备的移动路径；以及
当所述移动路径为折线时，显示设备激活所述显示设备中的感应光标。
10.一种终端设备，其特征在于，包括处理器和存储器，所述处理器与所述存储器电性连接，所述存储器用于存储指令和数据，所述处理器用于执行权利要求7至9所述的人机交互方法中的步骤。

说明书全文

人机交互系统及其方法、终端设备

技术领域

[0001] 本发明涉及计算机技术领域，尤其涉及一种人机交互系统及其方法、终端设备。

背景技术

[0002] 增强现实(Augmented Reality简称AR)/虚拟现实(Virtual Reality简称VR)设备可以使用户不再受终端设备的显示屏物理尺寸限制，随时随地以较大的显示屏浏览自己想
查看的信息。AR技术不仅可以展现真实世界的信息，而且将虚拟的信息同时显示出来，两种
信息互相补充和叠加将虚拟的信息投影到真实世界，被人类感官所感知。而VR技术可以渲
染整个场景，从而使人类获得超越现实的感官体验。

[0003] 但是市场上的AR/VR设备存在以下问题，首先AR/VR设备的应用生态匮乏，内容单一，用户无法获得多样化的体验；其次市面上普通的AR/VR设备受第三方手机权限的限制，
导致第三方应用程序使用受限，影响用户体验。

发明内容

[0004] 本发明实施例提供一种人机交互系统及其方法、终端设备，能够有效解决目前用户在佩戴AR/VR设备时，无法实现终端设备同步操作的问题。

[0005] 根据本申请的一方面，本发明实施例提供一种人机交互系统，包括：一显示设备；以及一终端设备，所述终端设备通过一连接线与所述显示设备连接；其中，所述显示设备通
过USB-TP连接协议与终端设备相互通信，以在所述显示设备上投射所述终端设备的显示屏
所输出的显示内容。

[0006] 进一步地，所述显示设备包括一头部追踪模块，用于获取所述显示设备的移动路径。

[0007] 进一步地，所述显示设备包括一模拟显示屏触摸模块，与所述头部追踪模块连接，用于获取所述显示设备中的感应光标的移动路径。

[0008] 进一步地，所述终端设备包括一显示屏触摸模块，用于获取用户触摸所述终端设备的显示屏的触摸路径，并传送至所述显示装置。

[0009] 进一步地，所述终端设备还包括一语音识别模块，与所述显示屏触摸模块连接，所述语音识别模块用于将用户的语音转换为文本。

[0010] 进一步地，所述连接线为USB Type-C线或DP线。

[0011] 根据本申请的另一方面，本发明实施例提供一种人机交互方法，包括以下步骤：检测是否连接至显示设备；当检测到连接至显示设备时，获取用户触摸终端设备的显示屏的
触摸路径；当所述触摸路径位于所述终端设备显示屏中部的直线时，显示所述终端设备的
显示屏的主界面；当所述触摸路径位于所述终端设备显示屏两侧的直线时，显示所述终端
设备的显示屏的当前显示界面的上一个显示界面；以及当所述触摸路径为折线时，激活所
述显示设备中的感应光标。

[0012] 进一步地，在当所述触摸路径为折线时激活所述显示设备中的感应光标步骤之后，所述方法还包括步骤：检测用户触摸所述终端设备的显示屏的压力值是否大于预设值；
当检测到用户触摸所述终端设备的显示屏的压力值大于预设值时，开启语音识别服务；以
及当检测到用户触摸终端设备显示屏的压力值不大于预设值时，关闭语音识别服务。

[0013] 进一步地，当检测到连接至显示设备，所述方法还包括步骤：显示设备获取所述显示设备的移动路径；以及当所述移动路径为折线时，显示设备激活所述显示设备中的感应
光标。

[0014] 根据本申请的又一方面，本发明实施例提供一种终端设备，包括处理器和存储器，所述处理器与所述存储器电性连接，所述存储器用于存储指令和数据，所述处理器用于执
行上述所述的人机交互方法中的步骤。

[0015] 本发明的优点在于，显示设备通过USB Type-C线或DP线与终端设备连接，并通过USB-TP连接协议与终端设备相互通信，通过USB-TP连接协议在所述显示设备上投射所述终
端设备的显示屏所输出的显示内容。另外在具体操作场景中，在终端设备的显示屏上模拟
 触摸板设备，并结合终端设备的显示屏和显示设备上的操作，完成对终端设备中第三方应
用的切换和操作。通过用户不同的触摸路径，终端设备做出与之相对应的操作，并将最终显
示内容通过连接线投射至显示设备中，为用户营造良好的沉浸式体验。
附图说明

[0016] 下面结合附图，通过对本发明的具体实施方式详细描述，将使本发明的技术方案及其它有益效果显而易见。

[0017] 图1为本发明实施例所提供的人机交互系统的结构示意图。

[0018] 图2为本发明实施例所提供的人机交互方法的步骤流程图。

[0019] 图3为本发明实施例所提供的终端设备的结构示意图。

[0020] 图4为本发明实施例所提供的终端设备的另一结构示意图。

具体实施方式

[0021] 下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于
本发明中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施
例，都属于本发明保护的范围。

[0022] 在本发明的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特
定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”仅用于
描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。
由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个所述特征。在
本发明的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。

[0023] 在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可
以是机械连接，也可以是电连接或可以相互通讯；可以是直接相连，也可以通过中间媒介间
接相连，可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术
人员而言，可以根据具体情况理解上述术语在本发明中的具体含义。在本实施例中，所述模
拟显示屏触摸模块与所述头部追踪模块连接，用于获取所述显示设备中的感应光标的移动
路径。

[0024] 在本发明中，除非另有明确的规定和限定，第一特征在第二特征之“上”或之“下”可以包括第一和第二特征直接接触，也可以包括第一和第二特征不是直接接触而是通过它
们之间的另外的特征接触。而且，第一特征在第二特征“之上”、“上方”和“上面”包括第一特
征在第二特征正上方和斜上方，或仅仅表示第一特征水平高度高于第二特征。第一特征在
第二特征“之下”、“下方”和“下面”包括第一特征在第二特征正下方和斜下方，或仅仅表示
第一特征水平高度小于第二特征。

[0025] 下文的公开提供了许多不同的实施方式或例子用来实现本发明的不同结构。为了简化本发明的公开，下文中对特定例子的部件和设置进行描述。当然，它们仅仅为示例，并
且目的不在于限制本发明。此外，本发明可以在不同例子中重复参考数字和/或参考字母，
这种重复是为了简化和清楚的目的，其本身不指示所讨论各种实施方式和/或设置之间的
关系。此外，本发明提供了的各种特定的工艺和材料的例子，但是本领域普通技术人员可以
意识到其他工艺的应用和/或其他材料的使用。

[0026] 如图1所示，为本发明实施例提供的人机交互系统的结构示意图，包括：一显示设备10及一终端设备20。

[0027] 所述终端设备20通过一连接线5与所述显示设备10连接，所述连接线5为USB Type-C线(即C型USB 接口)或DP(DisplayPort，显示接口)线。如此设置的目的在于，显示设
备通过USB Type-C线或DP线与终端设备连接，并通过USB-TP连接协议与终端设备相互通
信，通过USB-TP连接协议在所述显示设备上投射所述终端设备的显示屏所输出的显示内
容。

[0028] 在本实施例中，所述显示设备10为增强现实(Augmented Reality简称AR)或虚拟现实(Virtual Reality简称VR)设备，即为一种可穿戴式显示设备。其中所述显示设备10包
括：一头部追踪模块1及一模拟显示屏触摸模块2。

[0029] 在本实施例中，所述头部追踪模块1用于获取所述显示设备10的移动路径。需要说明的是所述头部追踪模块1主要由陀螺仪传感器组成，当用户在佩戴AR/VR设备时，通过捕
捉头部的运动事件，获取AR/VR设备的运动轨迹，AR/VR设备的运动轨迹即为所述显示设备
10的所述移动路径。

[0030] 在本实施例中，所述模拟显示屏触摸模块2与所述头部追踪模块1连接，用于获取所述显示设备10中的感应光标的移动路径。所述模拟显示屏触摸模块2的功能是由所述显
示设备10通过USB-TP连接协议与终端设备20相互通信实现。结合所述头部追踪模块1，模拟
感应光标在AR/VR设备上的移动路径。

[0031] 在本实施例中，所述终端设备20为手机，所述终端设备包括：一显示屏触摸模3块及一语音识别模块4。

[0032] 在本实施例中，所述显示屏触摸模块3用于获取用户触摸所述终端设备的显示屏的触摸路径，并传送至所述显示装置。当用户打开AR/VR设备之后，手机的显示屏显示为一
层空白的应用布局(即显示屏画面为空白)。获取用户的手势输入的触摸路径，识别用户从
手机下方不同位置的上划手势，并识别用户单指点击手势，并将识别结果上传给AR/VR设
备。

[0033] 在本实施例中，所述语音识别模块4与所述显示屏触摸模块3连接，所述语音识别模块4用于将用户的语音转换为文本。所述语音识别模块4帮助用户在不同的应用中完成输
入功能。用户通过按压终端设备的显示屏来启动和结束语音识别功能，所述语音识别模块
将获取到的语音转换为文本输出。

[0034] 本发明的优点在于，显示设备通过USB Type-C线或DP线与终端设备连接，并通过USB-TP连接协议与终端设备相互通信，通过USB-TP连接协议在所述显示设备上投射所述终
端设备的显示屏所输出的显示内容。

[0035] 如图2所示，为本发明实施例提供的人机交互方法步骤流程图，包括以下步骤：

[0036] 步骤S210：检测是否连接至显示设备。

[0037] 在本实施例中，所述终端设备通过一连接线与所述显示设备连接，所述连接线为USB Type-C线(即C型USB接口)或DP(DisplayPort，显示接口)线。所述显示设备为增强现实
(Augmented Reality简称AR)或虚拟现实(Virtual Reality简称VR)设备，其中所述显示设
备包括：一头部追踪模块及一模拟显示屏触摸模块。显示设备通过USB-TP连接协议与终端
设备相互通信，并在所述显示设备上投射所述终端设备的显示屏所输出的显示内容。

[0038] 步骤S220：当检测到连接至显示设备时，获取用户触摸终端设备的显示屏的触摸路径。

[0039] 在本实施例中，当用户打开AR/VR设备之后，终端设备的显示屏显示为一层空白的应用布局(即显示屏画面为空白)。获取用户的手势输入的触摸路径，识别用户从终端设备
下方不同位置的上划手势，并识别用户单指点击手势，并将识别结果上传给AR/VR设备。

[0040] 其中用户终端设备下方不同位置的上划手势，具体可以分为步骤S230-S233中的场景：

[0041] 步骤S230：当所述触摸路径位于所述终端设备显示屏中部的直线时，显示所述终端设备的显示屏的主界面，并将主界面的内容投射到用户的AR/VR设备上。

[0042] 步骤S231：当所述触摸路径位于所述终端设备显示屏两侧的直线时，显示所述终端设备的显示屏的当前显示界面的上一个显示界面，并将主界面的内容投射到用户的AR/
VR设备上。

[0043] 步骤S232：当所述触摸路径为折线时，激活所述显示设备中的感应光标。

[0044] 通过步骤S230、S231及S232中，通过在具体操作场景中，在终端设备的显示屏上模拟触摸板设备，并结合终端设备的显示屏和显示设备上的操作，完成对终端设备中第三方
应用的切换和操作。通过用户不同的触摸路径，终端设备做出与之相对应的操作，并将最终
显示内容通过连接线投射至显示设备中，为用户营造良好的沉浸式体验。

[0045] 另外在步骤S232中为通过终端设备激活感应光标的方法，在其他实施例中，也可以通过显示设备激活感应光标。例如步骤S221及步骤S233。

[0046] 步骤S221：显示设备获取所述显示设备的移动路径。

[0047] 在本实施例中，移动路径是由所述显示设备中的陀螺仪传感器获得。

[0048] 步骤S233当所述移动路径为折线时，显示设备激活所述显示设备中的感应光标。

[0049] 步骤S240：检测用户触摸所述终端设备的显示屏的压力值是否大于预设值。

[0050] 在本实施例中，用户的语音转换为文本。协助用户在不同的应用中完成输入功能。用户通过按压终端设备的显示屏来启动和结束语音识别功能，所述语音识别模块将获取到
的语音转换为文本输出。

[0051] 步骤S250：当检测到用户触摸所述终端设备的显示屏的压力值大于预设值时，开启语音识别服务。

[0052] 步骤S251：当检测到用户触摸终端设备显示屏的压力值不大于预设值时，关闭语音识别服务。

[0053] 在步骤S250和S251中，用户通过触摸所述终端设备的显示屏的压力值来控制语音输入的时间。

[0054] 本发明的优点在于，显示设备通过USB Type-C线或DP线与终端设备连接，并通过USB-TP连接协议与终端设备相互通信，通过USB-TP连接协议在所述显示设备上投射所述终
端设备的显示屏所输出的显示内容。另外在具体操作场景中，在终端设备的显示屏上模拟
触摸板设备，并结合终端设备的显示屏和显示设备上的操作，完成对终端设备中第三方应
用的切换和操作。通过用户不同的触摸路径，终端设备做出与之相对应的操作，并将最终显
示内容通过连接线投射至显示设备中，为用户营造良好的沉浸式体验。

[0055] 另外，本发明实施例还提供一种终端设备，该终端设备可以是智能手机、平板电脑等设备。具体地，如图3所示，终端设备200包括处理器201和存储器202。其中，处理器201与
存储器202电性连接。

[0056] 处理器201是终端设备200的控制中心，利用各种接口和线路连接整个终端设备的各个部分，通过运行或加载存储在存储器202内的应用程序，以及调用存储在存储器202内
的数据，执行终端设备的各种功能和处理数据，从而对终端设备进行整体监控。

[0057] 在本实施例中，该终端设备200设有多个存储分区，该多个存储分区包括系统分区和目标分区，终端设备200中的处理器201会按照如下的步骤，将一个或一个以上的应用程
序的进程对应的指令加载到存储器202中，并由处理器201来运行存储在存储器202中的应
用程序，从而实现各种功能：

[0058] 检测是否连接至显示设备；

[0059] 当检测到连接至显示设备时，获取用户触摸终端设备的显示屏的触摸路径；

[0060] 当所述触摸路径位于所述终端设备显示屏中部的直线时，显示所述终端设备的显示屏的主界面；

[0061] 当所述触摸路径位于所述终端设备显示屏两侧的直线时，显示所述终端设备的显示屏的当前显示界面的上一个显示界面；以及

[0062] 当所述触摸路径为折线时，激活所述显示设备中的感应光标。

[0063] 图4示出了本发明实施例提供的终端设备的具体结构框图，该终端设备可以用于实施上述实施例中提供的人机交互方法。该终端设备300可以为智能手机或平板电脑。

[0064] RF电路310用于接收以及发送电磁波，实现电磁波与电信号的相互转换，从而与通讯网络或者其他设备进行通讯。RF电路310可包括各种现有的用于执行这些功能的电路元
件，例如，天线、射频收发器、数字信号处理器、加密/解密芯片、用户身份模块(SIM)卡、存储
器等等。RF电路310可与各种网络如互联网、企业内部网、无线网络进行通讯或者通过无线
网络与其他设备进行通讯。上述的无线网络可包括蜂窝式电话网、无线局域网或者城域网。
上述的无线网络可以使用各种通信标准、协议及技术，包括但并不限于全球移动通信系统
(Global System for Mobile Communication,GSM)、增强型移动通信技术(Enhanced Data
GSM Environment,EDGE)，宽带码分多址技术(Wideband Code Division Multiple
Access,WCDMA)，码分多址技术(Code Division Access,CDMA)、时分多址技术(Time
Division Multiple Access,TDMA)，无线保真技术(Wireless Fidelity，Wi-Fi)(如美国电
气和电子工程师协会标准IEEE 802.11a，IEEE 802.11b,IEEE802.11g和/或IEEE
802.11n)、网络电话(Voice over Internet Protocol,VoIP)、全球微波互联接入
(Worldwide Interoperability for Microwave Access，Wi-Max)、其他用于邮件、即时通
讯及短消息的协议，以及任何其他合适的通讯协议，甚至可包括那些当前仍未被开发出来
的协议。

[0065] 存储器320可用于存储软件程序以及模块，如上述实施例中人机交互方法对应的程序指令/模块，处理器380通过运行存储在存储器320内的软件程序以及模块，从而执行各
种功能应用以及数据处理，即实现人机交互的功能。存储器320可包括高速随机存储器，还
可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储
器。在一些实例中，存储器320可进一步包括相对于处理器380远程设置的存储器，这些远程
存储器可以通过网络连接至终端设备300。上述网络的实例包括但不限于互联网、企业内部
网、局域网、移动通信网及其组合。

[0066] 输入单元330可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地，输入单元330可包括触
敏表面331以及其他输入设备332。触敏表面331，也称为触摸显示屏或者触控板，可收集用
户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表
面331上或在触敏表面331附近的操作)，并根据预先设定的程式驱动相应的连接装置。可选
的，触敏表面331可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用
户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸
检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器380，并能接收处理器380
发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型
实现触敏表面331。除了触敏表面331，输入单元330还可以包括其他输入设备332。具体地，
其他输入设备332可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、
轨迹球、鼠标、操作杆等中的一种或多种。

[0067] 显示单元340可用于显示由用户输入的信息或提供给用户的信息以及终端设备300的各种图形用户接口，这些图形用户接口可以由图形、文本、图标、视频和其任意组合来
构成。显示单元340可包括显示面板341，可选的，可以采用LCD(Liquid Crystal Display，
液晶显示器)、OLED(Organic Light-Emitting Diode,有机发光二极管)等形式来配置显示
面板341。进一步的，触敏表面331可覆盖显示面板341，当触敏表面331检测到在其上或附近
的触摸操作后，传送给处理器380以确定触摸事件的类型，随后处理器380根据触摸事件的
类型在显示面板341上提供相应的视觉输出。虽然在图4中，触敏表面331与显示面板341是
作为两个独立的部件来实现输入和输出功能，但是在某些实施例中，可以将触敏表面331与
显示面板341集成而实现输入和输出功能。

[0068] 终端设备300还可包括至少一种传感器350，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据
环境光线的明暗来调节显示面板341的亮度，接近传感器可在终端设备300移动到耳边时，
关闭显示面板341和/或背光。作为运动传感器的一种，重力加速度传感器可检测各个方向
上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态
的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲
击)等；至于终端设备300还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他
传感器，在此不再赘述。

[0069] 音频电路360、扬声器361，传声器362可提供用户与终端设备300之间的音频接口。音频电路360可将接收到的音频数据转换后的电信号，传输到扬声器361，由扬声器361转换
为声音信号输出；另一方面，传声器362将收集的声音信号转换为电信号，由音频电路360接
收后转换为音频数据，再将音频数据输出处理器380处理后，经RF电路310以发送给比如另
一终端，或者将音频数据输出至存储器320以便进一步处理。音频电路360还可能包括耳塞
插孔，以提供外设耳机与终端设备300的通信。

[0070] 终端设备300通过传输模块370(例如Wi-Fi模块)可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图4示出了传输模
块370，但是可以理解的是，其并不属于终端设备300的必须构成，完全可以根据需要在不改
变发明的本质的范围内而省略。

[0071] 处理器380是终端设备300的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在存储器320内的软件程序和/或模块，以及调用存储在存储器
320内的数据，执行终端设备300的各种功能和处理数据，从而对手机进行整体监控。可选
的，处理器380可包括一个或多个处理核心；在一些实施例中，处理器380可集成应用处理器
和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解
调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器
380中。

[0072] 终端设备300还包括给各个部件供电的电源390(比如电池)，在一些实施例中，电源可以通过电源管理系统与处理器380逻辑相连，从而通过电源管理系统实现管理充电、放
电、以及功耗管理等功能。电源390还可以包括一个或一个以上的直流或交流电源、再充电
系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。

[0073] 尽管未示出，终端设备300还可以包括摄像头(如前置摄像头、后置摄像头)、蓝牙模块等，在此不再赘述。具体在本实施例中，终端设备的显示单元是触摸屏显示器，终端设
备还包括有存储器，以及一个或者一个以上的程序，其中一个或者一个以上程序存储于存
储器中，且经配置以由一个或者一个以上处理器执行一个或者一个以上程序包含用于进行
以下操作的指令：

[0074] 检测是否连接至显示设备；

[0075] 当检测到连接至显示设备时，获取用户触摸终端设备的显示屏的触摸路径；

[0076] 当所述触摸路径位于所述终端设备显示屏中部的直线时，显示所述终端设备的显示屏的主界面；

[0077] 当所述触摸路径位于所述终端设备显示屏两侧的直线时，显示所述终端设备的显示屏的当前显示界面的上一个显示界面；以及

[0078] 当所述触摸路径为折线时，激活所述显示设备中的感应光标。

[0079] 具体实施时，以上各个模块可以作为独立的实体来实现，也可以进行任意组合，作为同一或若干个实体来实现，以上各个模块的具体实施可参见前面的方法实施例，在此不
再赘述。

[0080] 本领域普通技术人员可以理解，上述实施例的各种方法中的全部或部分步骤可以通过指令来完成，或通过指令控制相关的硬件来完成，该指令可以存储于一计算机可读存
储介质中，并由处理器进行加载和执行。

[0081] 为此，本发明实施例提供一种存储介质，其中存储有多条指令，该指令能够被处理器进行加载，以执行本发明实施例所提供的任一种人机交互方法中的步骤。

[0082] 其中，该存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，Random Access Memory)、磁盘或光盘等。

[0083] 由于该存储介质中所存储的指令，可以执行本发明实施例所提供的任一种人机交互方法中的步骤，因此，可以实现本发明实施例所提供的任一种人机交互方法所能实现的
有益效果，详见前面的实施例，在此不再赘述。

[0084] 以上各个操作的具体实施可参见前面的实施例，在此不再赘述。

[0085] 在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

[0086] 本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的技术方案及其核心思想；本领域的普通技术人员应当理解：
其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等
同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例的技术方
案的范围。

标题	发布/更新时间	阅读量
元件安装线的安装精度测定系统及安装精度测定方法	2020-05-11	811
蜂窝双重连接的建立	2020-05-11	341
基于多波束轮询的传输方法及通讯设备	2020-05-11	67
无线通信的方法、网络设备和终端设备	2020-05-12	181
辐射源	2020-05-11	914
具有集成温度控制的电子灶台式加热器单元	2020-05-11	874
数据处理方法及相关设备	2020-05-12	228
高速移动性通信系统和方法	2020-05-13	404
用于在多个带宽部分上执行数据发射和测量的方法和网络节点	2020-05-12	946
用于传输功率调整的发送功率控制命令	2020-05-13	901

人机交互系统及其方法、终端设备

人机交互系统及其方法、终端设备

技术领域

背景技术

发明内容

具体实施方式

该功能需要专业版企业版VIP权限，您可以：