首页 / 专利库 / 视听技术与设备 / 眼球追踪摄像头 / 通话控制方法及相关产品

通话控制方法及相关产品

阅读:229发布:2020-05-25

专利汇可以提供通话控制方法及相关产品专利检索,专利查询,专利分析的服务。并且本 申请 实施例 公开了一种通话控制方法及相关产品,应用于 电子 设备,电子设备包括显示屏、前置红外灯和前置摄像头,在电子设备接收到来电时,若电子设备处于预设工作模式,通过前置红外灯对目标对象进行照射,通过前置摄像头追踪所述目标对象的眼球,以确定目标对象的眼球关注的关注信息,确定关注信息对应的目标来电处理操作,并执行目标来电处理操作,如此,可通过追踪用户眼球关注的关注信息,确定目标来电处理操作,从而,能够通过用户眼球控制来电处理操作,提高了用户体验。,下面是通话控制方法及相关产品专利的具体信息内容。

1.一种通话控制方法,其特征在于,应用于电子设备,所述电子设备包括前置红外灯和前置摄像头,所述方法包括:
在所述电子设备接收到来电时,若所述电子设备处于预设工作模式,通过所述前置红外灯对目标对象进行照射;
通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注的关注信息;
确定所述关注信息对应的目标来电处理操作,并执行所述目标来电处理操作。
2.根据权利要求1所述的方法,其特征在于,所述电子设备还包括显示屏,所述通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注的关注信息,包括:
在所述显示屏处于亮屏状态时,通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注所述显示屏上的第一位置
在所述显示屏处于熄屏状态时,通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球在预设时间段内关注视线的目标移动轨迹。
3.根据权利要求2所述的方法,所述通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注所述显示屏上的第一位置,包括:
通过所述前置摄像头获取所述目标对象的第一人眼图像;
将所述第一人眼图像进行人眼特征提取,得到所述目标对象的瞳孔特征点;
根据所述瞳孔特征点确定眼球的瞳孔在所述第一人眼图像中的瞳孔位置;
根据所述瞳孔位置确定所述第一位置。
4.根据权利要求3所述的方法,其特征在于,所述根据所述瞳孔位置确定所述第一位置,包括:
获取所述红外摄像头的工作参数和所述显示屏的显示参数;
根据所述工作参数和所述显示参数将所述瞳孔位置转换为所述第一位置。
5.根据权利要求2-4任一项所述的方法,其特征在于,所述关注信息包括所述目标对象的眼球关注所述显示屏上的第一位置时,所述确定所述关注信息对应的目标来电处理操作,包括:
确定所述第一位置所处的所述显示屏上的目标区域;
根据预设的目标区域与来电处理操作之间的对应关系确定所述目标区域对应的目标来电处理操作。
6.根据权利要求2所述的方法,其特征在于,所述通过所述前置摄像头追踪所述目标对象的眼球关注视线的目标移动轨迹,包括:
通过所述前置摄像头获取所述目标对象的眼球关注视线的多个第二人眼图像;
根据所述多个第二人眼图像确定所述目标对象的眼球关注视线的目标移动轨迹;
所述确定所述关注信息对应的目标来电处理操作,包括:
根据预设的移动轨迹与来电处理操作之间的对应关系确定所述目标移动轨迹对应的目标来电处理操作。
7.根据权利要求6所述的方法,其特征在于,所述根据所述多个第二人眼图像确定所述目标对象的眼球关注视线的目标移动轨迹,包括:
根据所述多个第二人眼图像中每一第二人眼图像确定所述目标对象的眼球的关注视线,得到多个关注视线;
确定所述多个关注视线投影在同一平面上的多个关注点,所述平面平行于所述显示屏;
按照时间先后顺序将所述多个关注点进行连接,得到所述目标移动轨迹。
8.一种通话控制装置,其特征在于,应用于电子设备,所述电子设备包括显示屏、前置红外灯和前置摄像头,所述通话控制装置包括:
控制单元,用于在所述电子设备接收到来电时,若所述电子设备处于预设工作模式,通过所述前置红外灯对目标对象进行照射;
追踪单元,用于通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注的关注信息;
确定单元,用于确定所述关注信息对应的目标来电处理操作;
执行单元,用于执行所述目标来电处理操作。
9.一种电子设备,其特征在于,包括:显示屏、前置红外灯、前置摄像头、处理器、存储器和通信接口;以及一个或多个程序,所述一个或多个程序被存储在所述存储器中,并且被配置成由所述处理器执行,所述程序包括用于如权利要求1-7任一项所述的方法的指令。
10.一种计算机可读存储介质,其特征在于,其用于存储计算机程序,其中,所述计算机程序使得计算机执行如权利要求1-7任一项所述的方法。

说明书全文

通话控制方法及相关产品

技术领域

[0001] 本申请涉及通话控制领域,具体涉及一种通话控制方法及相关产品。

背景技术

[0002] 随着电子设备(如:手机、平板电脑等)的大量普及应用,电子设备能够支持的应用越来越多,功能越来越强大,电子设备向着多样化、个性化的方向发展,成为用户生活中不可缺少的电子用品。
[0003] 目前,当人们在进行开车或者工作的时候,若电子设备接收到来电,用户可能很难腾出手来进行来电处理。例如,用户在开车时,若有电话打进来,则需要用手去接听,但是当接听的电话为骚扰电话的时候,可能还需要用户腾出手后才能进行电话的挂断,此种情况会影响用户开车,会给用户带来不好的操作体验。发明内容
[0004] 本申请实施例提供了一种通话控制方法及相关产品,可通过追踪用户眼球关注的关注信息,确定目标来电处理操作,从而,在用户无法抽出手对设备进行来电处理操作时,通过用户眼球控制来电处理操作,提高了用户体验。
[0005] 第一方面,本申请实施例提供了一种通话控制方法,应用于电子设备,所述电子设备包括前置红外灯和前置摄像头,所述方法包括:
[0006] 在所述电子设备接收到来电时,若所述电子设备处于预设工作模式,通过所述前置红外灯对目标对象进行照射;
[0007] 通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注的关注信息;
[0008] 确定所述关注信息对应的目标来电处理操作,并执行所述目标来电处理操作。
[0009] 第二方面,本申请实施例提供了一种通话控制装置,应用于电子设备,所述电子设备包括前置红外灯和前置摄像头,所述通话控制装置包括:
[0010] 控制单元,用于在所述电子设备接收到来电时,若所述电子设备处于预设工作模式,通过所述前置红外灯对目标对象进行照射;
[0011] 追踪单元,用于通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注的关注信息;
[0012] 确定单元,用于确定所述关注信息对应的目标来电处理操作;
[0013] 执行单元,用于执行所述目标来电处理操作。
[0014] 第三方面,本申请实施例提供了一种电子设备,包括:显示屏、前置红外灯、前置摄像头、处理器、存储器和通信接口;以及一个或多个程序,所述一个或多个程序被存储在所述存储器中,并且被配置成由所述处理器执行,所述程序包括用于如本申请实施例第一方面中所描述的部分或全部步骤的指令。
[0015] 第四方面,本申请实施例提供了一种计算机可读存储介质,其中,所述计算机可读存储介质用于存储计算机程序,其中,所述计算机程序使得计算机执行如本申请实施例第一方面中所描述的部分或全部步骤的指令。
[0016] 第五方面,本申请实施例提供了一种计算机程序产品,其中,所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,所述计算机程序可操作来使计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
[0017] 实施本申请实施例,具有如下有益效果:
[0018] 可以看出,本申请实施例中所描述的通话控制方法及相关产品,应用于电子设备,电子设备包括显示屏、前置红外灯和前置摄像头,在电子设备接收到来电时,若电子设备处于预设工作模式,通过前置红外灯对目标对象进行照射,通过前置摄像头追踪所述目标对象的眼球,以确定目标对象的眼球关注的关注信息,确定关注信息对应的目标来电处理操作,并执行目标来电处理操作,如此,可通过追踪用户眼球关注的关注信息,确定目标来电处理操作,从而,在用户无法对设备进行来电处理操作时,通过用户眼球控制来电处理操作,提高了用户体验。附图说明
[0019] 为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0020] 图1A是本申请实施例提供的一种电子设备的结构示意图;
[0021] 图1B是本申请实施例提供的一种通话控制方法的流程示意图;
[0022] 图1C是本申请实施例提供的一种人眼图像的演示示意图;
[0023] 图2是本申请实施例提供的另一种通话控制方法的流程示意图;
[0024] 图3是本申请实施例提供的另一种通话控制方法的流程示意图;
[0025] 图4是本申请实施例提供的另一种电子设备的结构示意图;
[0026] 图5是本申请实施例提供的一种通话控制装置的结构示意图;
[0027] 图6是本申请实施例提供的电子设备的另一种结构示意图。

具体实施方式

[0028] 为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
[0029] 本申请的说明书权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
[0030] 在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
[0031] 本申请实施例所涉及到的电子设备可以包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备、计算设备或连接到无线调制解调器的其他处理设备,以及各种形式的用户设备(user equipment,UE),移动台(mobile station,MS),终端设备(terminal device)等等。为方便描述,上面提到的设备统称为电子设备。
[0032] 下面对本申请实施例进行详细介绍。
[0033] 请参阅图1A,图1A是本申请实施例提供的一种电子设备100的结构示意图,上述电子设备100包括:壳体110、设置于所述壳体110内的电路板120和设置于所述壳体110上的显示屏130、前置红外灯140和前置摄像头150,所述电路板120上设置有处理器121和存储器122。
[0034] 其中,前置摄像头可以是红外摄像头或者RGB摄像头,红外摄像头可以获取红外图像。RGB摄像头可以获取彩色图像。
[0035] 请参阅图1B,图1B是本申请实施例提供的一种通话控制方法的流程示意图,本实施例中所描述的通话控制方法,应用于如图1A所示的电子设备,所述电子设备包括前置红外灯和前置摄像头,该通话控制方法包括:
[0036] 101、在所述电子设备接收到来电时,若所述电子设备处于预设工作模式,通过所述前置红外灯对目标对象进行照射。
[0037] 其中,上述预设工作模式可以是驾驶模式或者工作模式,驾驶模式是指电子设备接收到来电时,用户正在驾驶车辆,双手难以操作电子设备进行来电处理操作的模式;工作模式是指,电子设备接收到来电时,用户正在忙于工作,双手难以操作电子设备进行来电处理操作的模式,本申请实施例中,电子设备可提供驾驶模式或者工作模式,从而,用户可在需要时,将电子设备设置为驾驶模式或者工作模式。从而,电子设备在接收到来电时,若电子设备处于预设工作模式,可通过前置红外灯对目标对象进行照射。
[0038] 102、通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注的关注信息。
[0039] 其中,目标对象是指电子设备进行眼球追踪的用户。
[0040] 其中,上述关注信息可以是目标对象关注电子设备的显示屏上的位置,还可以是目标对象眼球关注视线的移动轨迹。
[0041] 本申请实施例中,红外灯发射红外光照射到目标对象的眼球后,会在目标对象的瞳孔上形成光斑,若目标对象的视线发生变化,瞳孔在眼球区域的位置会发生变化,因此,可通过前置摄像头追踪目标对象的眼球关注的关注信息。
[0042] 可选地,上述步骤102中,所述通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注的关注信息,可包括以下步骤:
[0043] 21、在所述显示屏处于亮屏状态时,通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注所述显示屏上的第一位置;
[0044] 22、在所述显示屏处于熄屏状态时,通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球在预设时间段内关注视线的目标移动轨迹。
[0045] 其中,当电子设备接收到来电时,电子设备可能会处于亮屏状态,并通过显示屏显示来电显示的显示界面,目标对象可能会关注该显示界面,从而,可通过前置摄像头追踪所述目标对象的眼球,以确定目标对象的眼球关注所述显示屏上的第一位置,具体地,前置摄像头可追踪瞳孔位置,对瞳孔位置进行定位,然后,根据瞳孔位置确定用户眼球关注显示屏中的第一位置。当电子设备接收到来电时,电子设备还可能处于熄屏状态,目标对象可能是听到来电提示音或者来电振动提示得知接收到来电,进而,可鼓前置摄像头追踪目标对象的眼球,以确定目标对象的眼球在预设时间段内关注视线的目标移动轨迹。
[0046] 可选地,上述步骤21中,通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注所述显示屏上的第一位置,可包括以下步骤:
[0047] A1、通过所述前置摄像头获取所述目标对象的第一人眼图像;
[0048] A2、将所述第一人眼图像进行人眼特征提取,得到所述目标对象的瞳孔特征点;
[0049] A3、根据所述瞳孔特征点确定眼球的瞳孔在所述第一人眼图像中的瞳孔位置;
[0050] A4、根据所述瞳孔位置确定所述第一位置。
[0051] 其中,可在红外灯发射的红外光照射到目标对象的眼球后,通过前置摄像头获取所述目标对象的第一人眼图像,如图1C所示,图1C为本申请实施例提供的一种第一人眼图像的演示示意图,其中,可通过对第一人眼图像进行人眼特征提取,得到目标对应的瞳孔特征点,然后,根据瞳孔特征点确定瞳孔在人眼图像中的瞳孔位置。最后,将瞳孔位置转换成用户眼球关注显示屏中的第一位置。
[0052] 可选地,上述步骤A4中,根据所述瞳孔位置确定所述第一位置,可包括以下步骤:
[0053] A41、获取所述红外摄像头的工作参数和所述显示屏的显示参数;
[0054] A42、根据所述工作参数和所述显示参数将所述瞳孔位置转换为所述第一位置。
[0055] 其中,前置摄像头的工作参数可包括以下至少一种:前置摄像头的分辨率、前置摄像头的拍摄度、前置摄像头在电子设备上的位置等等。显示屏的显示参数可包括显示屏的分辨率或显示屏的倾斜角度。
[0056] 其中,根据所述工作参数和所述显示参数将所述瞳孔位置转换为所述第一位置,具体可根据前置摄像头的分辨率、前置摄像头的拍摄角度或前置摄像头在电子设备上的位置,显示屏的分辨率或显示屏的倾斜角度将人眼图像中的瞳孔位置转换成用户关注显示屏中的第一位置。
[0057] 可选地,上述步骤22中,通过所述前置摄像头追踪所述目标对象的眼球关注视线的目标移动轨迹,可包括以下步骤:
[0058] B1、通过所述前置摄像头获取所述目标对象的眼球关注视线的多个第二人眼图像;
[0059] B2、根据所述多个第二人眼图像确定所述目标对象的眼球关注视线的目标移动轨迹。
[0060] 本申请实施例中,可通过电子设备获取预设时间段内的多个第二人眼图像,当目标对象的眼球转动,多个第二人眼图像中每一第二人眼图像中目标对象的瞳孔所在的位置不一样,进而,可根据多个第二人眼图像确定目标对象的眼球关注视线的目标移动轨迹。
[0061] 可选地,上述步骤B2中,通过所述前置摄像头追踪所述目标对象的眼球关注视线的目标移动轨迹,可包括以下步骤:
[0062] B21、根据所述多个第二人眼图像中每一第二人眼图像确定所述目标对象的眼球的关注视线,得到多个关注视线;
[0063] B22、确定所述多个关注视线投影在同一平面上的多个关注点,所述平面平行于所述显示屏;
[0064] B23、按照时间先后顺序将所述多个关注点进行连接,得到所述目标移动轨迹。
[0065] 本申请实施例中,在目标对象的眼球运动的过程中,可根据多个第二人眼图像中每一第二人眼图像确定目标对象的瞳孔在第二人眼图像中的瞳孔位置,然后根据该瞳孔位置、摄像头的拍摄角度以及红外光发射方向确定目标对象的眼球的关注视线,进而,可确定多个第二人眼图像对应的目标对象的眼球关注视线,得到多个关注视线,然后,将多个关注视线投影在同一平面上的多个关注点,平面平行于所述显示屏。其中,考虑到在熄屏状态下,目标对象的眼球的关注视线可能在显示屏以外,因此,可确定一个平行于显示屏的平面,该平面可以是距离显示屏预设距离的一个平面。最后,可按照时间先后顺序将多个关注点进行连接,得到目标对象眼球的视线进行运动时产生的目标移动轨迹。
[0066] 可选地,本申请实施例中,在步骤22中确定所述多个关注视线投影在同一平面上的多个关注点,所述平面平行于所述显示屏之前,还可包括以下步骤:
[0067] C1、根据所述多个第二人眼图像中任一第二人眼图像进行人眼特征提取,得到眼球区域特征点;
[0068] C2、根据眼球区域特征点确定眼球轮廓的眼球区域面积;
[0069] C3、根据所述眼球区域面积确定眼球与电子设备之间的参考距离;
[0070] C4、根据预设的参考距离对应的目标对象的眼球与平面之间的目标距离;
[0071] C5、确定与所述目标对象的眼球相隔所述目标距离的平面。
[0072] 其中,参考距离是指目标对象的眼球与电子设备之间的距离,目标距离是指目标对象的眼球与平面之间的距离。
[0073] 其中,考虑到目标对象的眼球距离电子设备越远,捕捉到目标对象的眼球关注视线越模糊,在设定多个关注视线投影在同一平面上时,设定的平面距离距离目标对象的眼球越远,确定的视线在该平面上投影的关注点越模糊,因此,可预先获取多个参考距离下,每一参考距离对应的目标距离,得到多个目标距离,根据多个参考距离和多个目标距离设定参考距离与目标距离之间的对应关系,从而,可根据第二人眼图像进行人眼特征提取,得到眼球区域特征点,根据眼球区域特征点确定眼球轮廓的眼球区域面积,然后,根据眼球区域面积确定眼球与电子设备之间的参考距离,进而,根据预设的参考距离对应的目标对象的眼球与平面之间的目标距离,最后,确定与目标对象的眼球相隔目标距离的平面。如此,可使确定的平面在进行多个关注视线投影后,得到的多个关注点更加清晰,使得目标移动轨迹更加准确。
[0074] 103、确定所述关注信息对应的目标来电处理操作,并执行所述目标来电处理操作。
[0075] 本申请实施例中,可以预先设定关注信息与来电处理操作之间的对应关系,例如,当确定目标对象的眼球关注所述显示屏上的第一位置为接听电话对应的区域,则进行电话接听;若确定目标对象的眼球在预设时间段内关注视线的目标移动轨迹,为预设移动轨迹时,可进行电话挂断。如下表1所示,为本申请实施例提供的一种关注信息与来电处理操作之间的对应关系的示例。
[0076]关注信息 来电处理操作
第一位置属于第一预设区域 接听来电
第一位置属于第二预设区域 挂断
第一预设移动轨迹 挂断并拉黑
第二预设移动轨迹 回拨
[0077] 表1
[0078] 可选地,本申请实施例中,所述关注信息包括所述目标对象的眼球关注所述显示屏上的第一位置时,确定所述关注信息对应的目标来电处理操作,并执行所述目标来电处理操作,可包括以下步骤:
[0079] 31、确定所述第一位置所处的所述显示屏上的目标区域;
[0080] 32、根据预设的目标区域与来电处理操作之间的对应关系确定所述目标区域对应的目标来电处理操作。
[0081] 本申请实施例中,可在根据来电显示界面的显示内容,设定不同区域对应的不同来电处理操作,例如,设定显示界面中用于标识挂断的预设区域,用户标识接通电话的预设区域,从而,可在确定目标对象的眼球关注显示屏上的第一位置时,根据预设的目标区域与来电处理操作之间的对应关系确定目标区域对应的目标来电处理操作。
[0082] 可选地,当关注信息为目标对象的眼球关注视线的目标移动轨迹,上述步骤103中,确定所述关注信息对应的目标来电处理操作,包括:
[0083] 根据预设的移动轨迹与来电处理操作之间的对应关系确定所述目标移动轨迹对应的目标来电处理操作。
[0084] 其中,可预先设定不同移动轨迹对应的不同的来电处理操作,从而,可在确定目标对象的眼球关注视线的目标移动轨迹时,根据预设的移动轨迹与来电处理操作之间的对应关系确定所述目标移动轨迹对应的目标来电处理操作。
[0085] 可以看出,本申请实施例中所描述的通话控制方法,应用于电子设备,电子设备包括显示屏、前置红外灯和前置摄像头,在电子设备接收到来电时,若电子设备处于预设工作模式,通过前置红外灯对目标对象进行照射,通过前置摄像头追踪所述目标对象的眼球,以确定目标对象的眼球关注的关注信息,确定关注信息对应的目标来电处理操作,并执行目标来电处理操作,如此,可通过追踪用户眼球关注的关注信息,确定目标来电处理操作,从而,在用户无法对设备进行来电处理操作时,通过用户眼球控制来电处理操作,提高了用户体验。
[0086] 请参阅图2,图2是本申请实施例提供的另一种通话控制方法的流程示意图,本实施例中所描述的通话控制方法,应用于如图1A所示的电子设备,所述电子设备包括前置红外灯和前置摄像头,该方法可包括以下步骤:
[0087] 201、在电子设备接收到来电时,若所述电子设备处于预设工作模式,通过所述前置红外灯对目标对象进行照射。
[0088] 202、在显示屏处于亮屏状态时,通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注所述显示屏上的第一位置。
[0089] 203、确定所述第一位置所处的所述显示屏上的目标区域。
[0090] 204、根据预设的目标区域与来电处理操作之间的对应关系确定所述目标区域对应的目标来电处理操作。
[0091] 205、在所述显示屏处于熄屏状态时,通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球在预设时间段内关注视线的目标移动轨迹。
[0092] 206、根据预设的移动轨迹与来电处理操作之间的对应关系确定所述目标移动轨迹对应的目标来电处理操作。
[0093] 207、执行所述目标来电处理操作。
[0094] 其中,上述步骤201-207的具体实现过程可参照步骤101-103中相应的描述,在此不再赘述。
[0095] 可以看出,本申请实施例中所描述的通话控制方法,应用于电子设备,在电子设备接收到来电时,若电子设备处于预设工作模式,通过前置红外灯对目标对象进行照射,在显示屏处于亮屏状态时,通过前置摄像头追踪目标对象的眼球,以确定目标对象的眼球关注显示屏上的第一位置,确定第一位置所处的显示屏上的目标区域,确定目标区域对应的目标来电处理操作,在显示屏处于熄屏状态时,通过前置摄像头追踪目标对象的眼球,以确定目标对象的眼球在预设时间段内关注视线的目标移动轨迹,确定目标移动轨迹对应的目标来电处理操作,执行目标来电处理操作,如此,可通过追踪用户眼球关注的第一位置或者目标移动轨迹确定目标来电处理操作,从而,在用户无法对设备进行来电处理操作时,通过用户眼球控制来电处理操作,提高了用户体验。
[0096] 与上述一致地,请参阅图3,为本申请实施例提供的另一种通话控制方法的流程示意图,本实施例中所描述的通话控制方法,应用于如图1A所示的电子设备,所述电子设备包括前置红外灯和前置摄像头,该方法可包括以下步骤:
[0097] 301、在所述电子设备接收到来电时,若所述电子设备处于预设工作模式,通过所述前置红外灯对目标对象进行照射。
[0098] 302、在所述显示屏处于亮屏状态时,通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注所述显示屏上的第一位置。
[0099] 303、确定所述第一位置所处的所述显示屏上的目标区域。
[0100] 304、根据预设的目标区域与来电处理操作之间的对应关系确定所述目标区域对应的目标来电处理操作。
[0101] 305、在所述显示屏处于熄屏状态时,通过所述前置摄像头获取所述目标对象的眼球关注视线的多个第二人眼图像。
[0102] 306、根据所述多个第二人眼图像确定所述目标对象的眼球关注视线的目标移动轨迹。
[0103] 307、根据预设的移动轨迹与来电处理操作之间的对应关系确定所述目标移动轨迹对应的目标来电处理操作。
[0104] 308、执行所述目标来电处理操作。
[0105] 其中,步骤301-308的具体实现过程可参见步骤101-103中相应的描述,在此不再赘述。
[0106] 可以看出,本申请实施例中所描述的通话控制方法,应用于电子设备,电子设备包括显示屏、前置红外灯和前置摄像头,在电子设备接收到来电时,若电子设备处于预设工作模式,通过前置红外灯对目标对象进行照射,在显示屏处于亮屏状态时,通过前置摄像头追踪目标对象的眼球,以确定目标对象的眼球关注显示屏上的第一位置,确定第一位置所处的显示屏上的目标区域,确定目标区域对应的目标来电处理操作,在显示屏处于熄屏状态时,通过前置摄像头获取目标对象的眼球关注视线的多个第二人眼图像,根据多个第二人眼图像确定目标对象的眼球关注视线的目标移动轨迹,确定目标移动轨迹对应的目标来电处理操作,执行目标来电处理操作,如此,可通过追踪用户眼球关注的第一位置或者目标移动轨迹确定目标来电处理操作,从而,在用户无法对设备进行来电处理操作时,通过用户眼球控制来电处理操作,提高了用户体验。
[0107] 以下是实施上述通话控制方法的装置,具体如下:
[0108] 与上述一致地,请参阅图4,图4是本申请实施例提供的一种电子设备的结构示意图,该电子设备包括:处理器410、显示屏430、前置红外灯440、前置摄像头450、通信接口460和存储器420;以及一个或多个程序,所述一个或多个程序421被存储在所述存储器中,并且被配置成由所述处理器执行,所述程序421包括用于执行以下步骤的指令:
[0109] 在所述电子设备接收到来电时,若所述电子设备处于预设工作模式,通过所述前置红外灯对目标对象进行照射;
[0110] 通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注的关注信息;
[0111] 确定所述关注信息对应的目标来电处理操作,并执行所述目标来电处理操作。
[0112] 在一个可能的示例中,在所述通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注的关注信息方面,所述程序421包括用于执行以下步骤的指令:
[0113] 在所述显示屏处于亮屏状态时,通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注所述显示屏上的第一位置;
[0114] 在所述显示屏处于熄屏状态时,通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球在预设时间段内关注视线的目标移动轨迹。
[0115] 在一个可能的示例中,在所述通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注所述显示屏上的第一位置方面,所述程序421包括用于执行以下步骤的指令:
[0116] 通过所述前置摄像头获取所述目标对象的第一人眼图像;
[0117] 将所述第一人眼图像进行人眼特征提取,得到所述目标对象的瞳孔特征点;
[0118] 根据所述瞳孔特征点确定眼球的瞳孔在所述第一人眼图像中的瞳孔位置;
[0119] 根据所述瞳孔位置确定所述第一位置。
[0120] 在一个可能的示例中,在所述根据所述瞳孔位置确定所述第一位置方面,所述程序421包括用于执行以下步骤的指令:
[0121] 获取所述红外摄像头的工作参数和所述显示屏的显示参数;
[0122] 根据所述工作参数和所述显示参数将所述瞳孔位置转换为所述第一位置。
[0123] 在一个可能的示例中,所述关注信息包括所述目标对象的眼球关注所述显示屏上的第一位置时,在所述确定所述关注信息对应的目标来电处理操作方面,所述程序421还包括用于执行以下步骤的指令:
[0124] 确定所述第一位置所处的所述显示屏上的目标区域;
[0125] 根据预设的目标区域与来电处理操作之间的对应关系确定所述目标区域对应的目标来电处理操作。
[0126] 在一个可能的示例中,在所述通过所述前置摄像头追踪所述目标对象的眼球关注视线的目标移动轨迹方面,所述程序421还包括用于执行以下步骤的指令:
[0127] 通过所述前置摄像头获取所述目标对象的眼球关注视线的多个第二人眼图像;
[0128] 根据所述多个第二人眼图像确定所述目标对象的眼球关注视线的目标移动轨迹;
[0129] 在所述确定所述关注信息对应的目标来电处理操作方面,所述程序421还包括用于执行以下步骤的指令:
[0130] 根据预设的移动轨迹与来电处理操作之间的对应关系确定所述目标移动轨迹对应的目标来电处理操作。
[0131] 在一个可能的示例中,在所述根据所述多个第二人眼图像确定所述目标对象的眼球关注视线的目标移动轨迹方面,所述程序421还包括用于执行以下步骤的指令:
[0132] 根据所述多个第二人眼图像中每一第二人眼图像确定所述目标对象的眼球的关注视线,得到多个关注视线;
[0133] 确定所述多个关注视线投影在同一平面上的多个关注点,所述平面平行于所述显示屏;
[0134] 按照时间先后顺序将所述多个关注点进行连接,得到所述目标移动轨迹。
[0135] 请参阅图5,图5是本实施例提供的一种通话控制装置的结构示意图,应用于电子设备,所述电子设备包括前置红外灯和前置摄像头,所述通话控制装置包括控制单元501、追踪单元502、确定单元503和执行单元504,其中,
[0136] 所述控制单元501,用于在所述电子设备接收到来电时,若所述电子设备处于预设工作模式,通过所述前置红外灯对目标对象进行照射;
[0137] 所述追踪单元502,用于通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注的关注信息;
[0138] 所述确定单元503,用于确定所述关注信息对应的目标来电处理操作;
[0139] 所述执行单元504,用于执行所述目标来电处理操作。
[0140] 可选地,所述电子设备还包括显示屏,在所述通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注的关注信息方面,所述追踪单元502具体用于:
[0141] 在所述显示屏处于亮屏状态时,通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注所述显示屏上的第一位置;
[0142] 在所述显示屏处于熄屏状态时,通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球在预设时间段内关注视线的目标移动轨迹。
[0143] 可选地,在所述通过所述前置摄像头追踪所述目标对象的眼球,以确定所述目标对象的眼球关注所述显示屏上的第一位置方面,所述追踪单元502具体用于:
[0144] 通过所述前置摄像头获取所述目标对象的第一人眼图像;
[0145] 将所述第一人眼图像进行人眼特征提取,得到所述目标对象的瞳孔特征点;
[0146] 根据所述瞳孔特征点确定眼球的瞳孔在所述第一人眼图像中的瞳孔位置;
[0147] 根据所述瞳孔位置确定所述第一位置。
[0148] 可选地,在所述根据所述瞳孔位置确定所述第一位置方面,所述追踪单元502具体用于:
[0149] 获取所述红外摄像头的工作参数和所述显示屏的显示参数;
[0150] 根据所述工作参数和所述显示参数将所述瞳孔位置转换为所述第一位置。
[0151] 可选地,所述关注信息包括所述目标对象的眼球关注所述显示屏上的第一位置时,在所述确定所述关注信息对应的目标来电处理操作方面,所述确定单元503具体用于:
[0152] 确定所述第一位置所处的所述显示屏上的目标区域;
[0153] 根据预设的目标区域与来电处理操作之间的对应关系确定所述目标区域对应的目标来电处理操作。
[0154] 可选地,在所述通过所述前置摄像头追踪所述目标对象的眼球关注视线的目标移动轨迹方面,所述追踪单元502具体用于:
[0155] 通过所述前置摄像头获取所述目标对象的眼球关注视线的多个第二人眼图像;
[0156] 根据所述多个第二人眼图像确定所述目标对象的眼球关注视线的目标移动轨迹;
[0157] 可选地,在所述确定所述关注信息对应的目标来电处理操作方面,所述确定单元503具体用于:
[0158] 根据预设的移动轨迹与来电处理操作之间的对应关系确定所述目标移动轨迹对应的目标来电处理操作。
[0159] 可选地,在所述根据所述多个第二人眼图像确定所述目标对象的眼球关注视线的目标移动轨迹方面,所述追踪单元502具体用于:
[0160] 根据所述多个第二人眼图像中每一第二人眼图像确定所述目标对象的眼球的关注视线,得到多个关注视线;
[0161] 确定所述多个关注视线投影在同一平面上的多个关注点,所述平面平行于所述显示屏;
[0162] 按照时间先后顺序将所述多个关注点进行连接,得到所述目标移动轨迹。
[0163] 可以看出,本申请实施例中所描述的通话控制装置,应用于电子设备,电子设备包括显示屏、前置红外灯和前置摄像头,在电子设备接收到来电时,若电子设备处于预设工作模式,通过前置红外灯对目标对象进行照射,通过前置摄像头追踪所述目标对象的眼球,以确定目标对象的眼球关注的关注信息,确定关注信息对应的目标来电处理操作,并执行目标来电处理操作,如此,可通过追踪用户眼球关注的关注信息,确定目标来电处理操作,从而,在用户无法对设备进行来电处理操作时,通过用户眼球控制来电处理操作,提高了用户体验。
[0164] 可以理解的是,本实施例的通话控制装置的各程序模的功能可根据上述方法实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
[0165] 本申请实施例还提供了另一种电子设备,如图6所示,为了便于说明,仅示出了与本申请实施例相关的部分,具体技术细节未揭示的,请参照本申请实施例方法部分。该电子设备可以为包括手机、平板电脑、PDA(personal digital assistant,个人数字助理)、POS(point of sales,销售终端)、车载电脑等任意终端设备,以电子设备为手机为例:
[0166] 图6示出的是与本申请实施例提供的电子设备相关的手机的部分结构的框图。参考图6,手机包括:射频(Radio Frequency,RF)电路910、存储器920、输入单元930、显示单元940、传感器950、音频电路960、无线保真(Wireless Fidelity,Wi-Fi)模块970、处理器980、电源990、摄像头9100、以及前置红外灯9200等部件。本领域技术人员可以理解,图6中示出的手机结构并不构成对手机的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
[0167] 下面结合图6对手机的各个构成部件进行具体的介绍:
[0168] RF电路910可用于信息的接收和发送。通常,RF电路910包括但不限于天线、至少一个放大器收发信机耦合器低噪声放大器(Low Noise Amplifier,LNA)、双工器等。此外,RF电路910还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(Global  System  of  Mobile communication,GSM)、通用分组无线服务(General Packet Radio Service,GPRS)、码分多址(Code Division Multiple Access,CDMA)、宽带码分多址(Wideband Code Division Multiple Access,WCDMA)、长期演进(Long Term Evolution,LTE)、电子邮件、短消息服务(Short Messaging Service,SMS)等。
[0169] 存储器920可用于存储软件程序以及模块,处理器980通过运行存储在存储器920的软件程序以及模块,从而执行手机的各种功能应用以及数据处理。存储器920可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序等;存储数据区可存储根据手机的使用所创建的数据等。此外,存储器920可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
[0170] 输入单元930可用于接收输入的数字或字符信息,以及产生与手机的用户设置以及功能控制有关的键信号输入。具体地,输入单元930可包括指纹识别模组931以及其他输入设备932。指纹识别模组931,可采集用户在其上的指纹数据。除了指纹识别模组931,输入单元930还可以包括其他输入设备932。具体地,其他输入设备932可以包括但不限于触控屏、物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球鼠标、操作杆等中的一种或多种。
[0171] 显示单元940可用于显示由用户输入的信息或提供给用户的信息以及手机的各种菜单。显示单元940可包括显示屏941,可选的,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机或无机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示屏941。
[0172] 手机还可包括至少一种传感器950,比如光传感器、运动传感器、传感器、温度传感器以及其他传感器。具体地,光传感器可包括环境光传感器(也称为光线传感器)及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节手机的背光亮度,进而调节显示屏941的亮度,接近传感器可在手机移动到边时,关闭显示屏941和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于手机还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
[0173] 音频电路960、扬声器961,传声器962可提供用户与手机之间的音频接口。音频电路960可将接收到的音频数据转换后的电信号,传输到扬声器961,由扬声器961转换为声音信号播放;另一方面,传声器962将收集的声音信号转换为电信号,由音频电路960接收后转换为音频数据,再将音频数据播放处理器980处理后,经RF电路910以发送给比如另一手机,或者将音频数据播放至存储器920以便进一步处理。
[0174] Wi-Fi属于短距离无线传输技术,手机通过Wi-Fi模块970可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图6示出了Wi-Fi模块970,但是可以理解的是,其并不属于手机的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
[0175] 处理器980是手机的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器920内的软件程序和/或模块,以及调用存储在存储器920内的数据,执行手机的各种功能和处理数据,从而对手机进行整体监控。可选的,处理器980可包括一个或多个处理单元;优选的,处理器980可集成应用处理器AP和调制解调处理器,其中,应用处理器AP主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器980中。
[0176] 手机还包括给各个部件供电的电源990(比如电池),优选的,电源可以通过电源管理系统与处理器980逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
[0177] 手机还包括摄像头9100和前置红外灯9200,摄像头9100包括前置摄像头和后置摄像头,前置摄像头和后置摄像头用于拍摄图像与视频,并将拍摄的图像和视频传输到处理器980进行处理。前置红外灯9200可用于发射红外光。
[0178] 手机还可以包括蓝牙模块等,在此不再赘述。
[0179] 前述图1B、图2和图3所示的实施例中,各步骤方法流程可以基于该手机的结构实现。
[0180] 本申请实施例还提供一种计算机可读存储介质,其中,该计算机可读存储介质存储用于电子数据交换的计算机程序,该计算机程序使得计算机执行如上述通话控制方法实施例中记载的任一方法的部分或全部步骤,上述计算机包括电子设备。
[0181] 本申请实施例还提供一种计算机程序产品,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如上述方法实施例中记载的任一通话控制方法的部分或全部步骤。该计算机程序产品可以为一个软件安装包,上述计算机包括电子设备。
[0182] 需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
[0183] 在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
[0184] 在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如上述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
[0185] 上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
[0186] 另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
[0187] 上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
[0188] 本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储器中,存储器可以包括:闪存盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取器(英文:Random Access Memory,简称:RAM)、磁盘或光盘等。
[0189] 以上对本申请实施例进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
高效检索全球专利

专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。

申请试用

分析报告

专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。

申请试用

QQ群二维码
意见反馈