显示控制方法及相关产品
阅读：200发布：2020-05-23
专利汇可以提供显示控制方法及相关产品专利检索，专利查询，专利分析的服务。并且本 申请 实施例 公开了一种显示控制方法及相关产品，应用于 电子 设备，电子设备包括处理器、显示屏和前置摄像头，当电子设备处于多人视频 聊天 状态时，处理器获取显示屏显示的视频聊天画面中多个视频窗口的视频窗口数量，在视频窗口数量超过预设数量时，通过前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一 位置 ，在眼球关注第一位置的第一关注时长超过第一预设时长时，处理器将多个视频窗口中与第一位置对应的目标视频窗口进行调整，如此，可通过追踪目标对象眼球关注视频聊天画面中的位置，对目标对象关注的目标视频窗口进行调整，使视频窗口显示控制更加便捷、智能。，下面是显示控制方法及相关产品专利的具体信息内容。
1.一种显示控制方法，其特征在于，应用于电子设备，所述电子设备包括处理器、显示屏和前置摄像头，所述方法包括：
当所述电子设备处于多人视频聊天状态时，所述处理器获取所述显示屏显示的视频聊天画面中多个视频窗口的视频窗口数量；
在所述视频窗口数量超过预设数量时，通过所述前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置；
在所述眼球关注所述第一位置的第一关注时长超过第一预设时长时，所述处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整。
2.根据权利要求1所述的方法，其特征在于，所述电子设备还包括前置红外灯，所述通过所述前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置，包括：
在所述前置红外灯对目标对象进行照射时，通过所述前置摄像头获取所述目标对象的人眼图像；
将所述人眼图像进行人眼特征提取，得到所述目标对象的瞳孔特征点；
根据所述瞳孔特征点确定所述瞳孔在所述人眼图像中的瞳孔位置；
根据所述瞳孔位置确定所述第一位置。
3.根据权利要求2所述的方法，其特征在于，所述根据所述瞳孔位置确定所述第一位置，包括：
获取所述前置摄像头的工作参数和所述显示屏的显示参数；
根据所述工作参数和所述显示参数将所述瞳孔位置转换为所述第一位置。
4.根据权利要求1-3任一项所述的方法，所述处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整，包括：
若所述第一位置不处于所述视频聊天画面中的预设显示区域，将所述目标视频窗口放大至预设显示面积，得到放大后的目标视频窗口；
将所述放大后的目标视频窗口在所述预设显示区域进行显示。
5.根据权利要求1-4任一项所述的方法，其特征在于，所述方法还包括：
在所述处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整之后，若所述前置摄像头检测到所述眼球未关注所述视频聊天画面，由所述处理器将调整后的所述目标视频窗口进行恢复。
6.一种显示控制装置，其特征在于，应用于电子设备，所述电子设备包括处理器、显示屏和前置摄像头，所述显示控制装置包括：
获取单元，用于在所述电子设备处于多人视频聊天状态时，通过所述处理器获取所述显示屏显示的视频聊天画面中多个视频窗口的视频窗口数量；
追踪单元，用于在所述视频窗口数量超过预设数量时，通过所述前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置；
调整单元，用于在所述眼球关注所述第一位置的第一关注时长超过第一预设时长时，通过所述处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整。
7.根据权利要求6所述的显示控制装置，其特征在于，所述电子设备还包括前置红外灯，在所述通过所述前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置方面，所述追踪单元具体用于：
在所述前置红外灯对目标对象进行照射时，通过所述前置摄像头获取所述目标对象的人眼图像；
将所述人眼图像进行人眼特征提取，得到所述目标对象的瞳孔特征点；
根据所述瞳孔特征点确定所述瞳孔在所述人眼图像中的瞳孔位置；
根据所述瞳孔位置确定所述第一位置。
8.根据权利要求7所述的显示控制装置，其特征在于，在所述根据所述瞳孔位置确定所述第一位置方面，所述追踪单元具体用于：
获取所述前置摄像头的工作参数和所述显示屏的显示参数；
根据所述工作参数和所述显示参数将所述瞳孔位置转换为所述第一位置。
9.一种电子设备，其特征在于，包括：显示屏、前置红外灯、前置摄像头、处理器、存储器和通信接口；以及一个或多个程序，所述一个或多个程序被存储在所述存储器中，并且被配置成由所述处理器执行，所述程序包括用于如权利要求1-5任一项所述的方法的指令。
10.一种计算机可读存储介质，其特征在于，其用于存储计算机程序，其中，所述计算机程序使得计算机执行如权利要求1-5任一项所述的方法。
显示控制方法及相关产品
技术领域
[0001] 本申请涉及显示控制领域，具体涉及一种显示控制方法及相关产品。
背景技术
[0003] 目前，在现有的视频聊天场景下，当同时参与视频聊天人数较多时，通常是在多个视频窗口显示每一聊天账号对应的视频画面，多个视频窗口在视频聊天画面中均等分割，使得每一聊天人员的画面会比较小，用户难以清晰看到每一聊天人员的画面，从而影响用户观看视频聊天画面的视觉体验。发明内容
[0005] 第一方面，本申请实施例提供了一种显示控制方法，应用于电子设备，所述电子设备包括处理器、显示屏和前置摄像头，所述方法包括：
[0006] 当所述电子设备处于多人视频聊天状态时，所述处理器获取所述显示屏显示的视频聊天画面中多个视频窗口的视频窗口数量；
[0007] 在所述视频窗口数量超过预设数量时，通过所述前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置；
[0008] 在所述眼球关注所述第一位置的第一关注时长超过第一预设时长时，所述处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整。
[0009] 第二方面，本申请实施例提供了一种显示控制装置，应用于电子设备，所述电子设备包括处理器、显示屏和前置摄像头，所述显示控制装置包括：
[0010] 获取单元，用于在所述电子设备处于多人视频聊天状态时，通过所述处理器获取所述显示屏显示的视频聊天画面中多个视频窗口的视频窗口数量；
[0011] 追踪单元，用于在所述视频窗口数量超过预设数量时，通过所述前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置；
[0012] 调整单元，用于在所述眼球关注所述第一位置的第一关注时长超过第一预设时长时，通过所述处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整。
[0013] 第三方面，本申请实施例提供了一种电子设备，包括：显示屏、前置红外灯、前置摄像头、处理器、存储器和通信接口；以及一个或多个程序，所述一个或多个程序被存储在所述存储器中，并且被配置成由所述处理器执行，所述程序包括用于如本申请实施例第一方面中所描述的部分或全部步骤的指令。
[0014] 第四方面，本申请实施例提供了一种计算机可读存储介质，其中，所述计算机可读存储介质用于存储计算机程序，其中，所述计算机程序使得计算机执行如本申请实施例第一方面中所描述的部分或全部步骤的指令。
[0015] 第五方面，本申请实施例提供了一种计算机程序产品，其中，所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，所述计算机程序可操作来使计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
[0016] 实施本申请实施例，具有如下有益效果：
[0017] 可以看出，本申请实施例中所描述的显示控制方法及相关产品，应用于电子设备，电子设备包括处理器、显示屏和前置摄像头，当电子设备处于多人视频聊天状态时，处理器获取显示屏显示的视频聊天画面中多个视频窗口的视频窗口数量，在视频窗口数量超过预设数量时，通过前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置，在眼球关注第一位置的第一关注时长超过第一预设时长时，处理器将多个视频窗口中与第一位置对应的目标视频窗口进行调整，如此，可通过追踪目标对象眼球关注视频聊天画面中的位置，对目标对象关注的目标视频窗口进行调整，使视频窗口显示控制更加便捷、智能。附图说明
[0018] 为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0019] 图1A是本申请实施例提供的一种电子设备的结构示意图；
[0020] 图1B是本申请实施例提供的一种显示控制方法的流程示意图；
[0021] 图1C是本申请实施例提供的一种电子设备在多人视频聊天状态下的视频聊天画面的演示示意图；
[0022] 图1D是本申请实施例提供的一种通过电子设备的前置摄像头追踪目标对象的眼球关注视频聊天画面中的第一位置的场景示意图；
[0023] 图1E是本申请实施例提供的一种人眼图像的演示示意图；
[0024] 图1F是本申请实施例提供的一种将第一位置对应的目标视频窗口进行调整的演示示意图；
[0025] 图1G是本申请实施例提供的一种将调整后的所述目标视频窗口进行恢复的演示示意图
[0026] 图2是本申请实施例提供的另一种显示控制方法的流程示意图；
[0027] 图3是本申请实施例提供的另一种显示控制方法的流程示意图；
[0028] 图4是本申请实施例提供的另一种电子设备的结构示意图；
[0029] 图5是本申请实施例提供的一种显示控制装置的结构示意图；
[0030] 图6是本申请实施例提供的电子设备的另一种结构示意图。
具体实施方式
[0031] 为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
[0032] 本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
[0033] 在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。
[0034] 本申请实施例所涉及到的电子设备可以包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备、计算设备或连接到无线调制解调器的其他处理设备，以及各种形式的用户设备(user equipment，UE)，移动台(mobile station，MS)，终端设备(terminal device)等等。为方便描述，上面提到的设备统称为电子设备。
[0035] 下面对本申请实施例进行详细介绍。
[0036] 请参阅图1A，图1A是本申请实施例提供的一种电子设备100的结构示意图，上述电子设备100包括：壳体110、设置于所述壳体110内的电路板120和设置于所述壳体110上的显示屏130、前置红外灯140、前置摄像头150，所述电路板120上设置有处理器121和存储器122。
[0037] 请参阅图1B，图1B是本申请实施例提供的一种显示控制方法的流程示意图，本实施例中所描述的显示控制方法，应用于如图1A所示的电子设备，所述电子设备包括处理器、显示屏、前置红外灯和前置摄像头，该显示控制方法包括：
[0038] 101、当所述电子设备处于多人视频聊天状态时，所述处理器获取所述显示屏显示的视频聊天画面中多个视频窗口的视频窗口数量。
[0039] 请参阅图1C，图1C为本申请实施例提供的一种电子设备在多人视频聊天状态下的视频聊天画面的演示示意图。如图1C所示，在多人视频聊天场景下，按照聊天群里面的多个聊天成员均等分割视频聊天画面，得到多个视频窗口，多个视频窗口中每一视频窗口显示每一个聊天成员对应的视频画面。从而，可通过电子设备的处理器获取多个视频的窗口的视频窗口数量，视频窗口数量例如可以是4个，5个，9个等等。
[0040] 102、在所述视频窗口数量超过预设数量时，通过所述前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置。
[0041] 其中，预设数量可以由系统默认设置，也可由用户自行设置，预设数量例如可以是4，5等等，此处不做限定。
[0042] 请参阅图1D，图1D为本申请实施例提供的一种通过电子设备的前置摄像头追踪目标对象的眼球关注视频聊天画面中的第一位置的场景示意图。如图1D所示，在多人视频聊天场景下，可通过电子设备的前置红外灯对目标对象进行照射，目标对象观看视频聊天画面时前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置。
[0043] 其中，目标对象是指通过电子设备进行视频聊天的用户。
[0044] 可选地，当有多个用户通过一个电子设备与其他聊天成员进行视频聊天时，即，电子设备对应的一个视频窗口中包含多个用户的人脸时，可从多个用户中确定一个用户作为目标对象，并针对目标对象进行眼球追踪。具体地，可通过获取针对多个用户的人脸图像，然后确定人脸图像中多个用户的多个人脸的多个位置，进而，根据多个位置之间的位置关系确定多个人脸中距离电子设备最近的用户人脸对应的用户为目标对象，最后，针对目标对象进行眼球跟踪。从而，可针对最靠近电子设备的用户进行眼球跟踪。
[0045] 可选地，在确定人脸图像中多个用户的多个人脸的多个位置之后，可将多个位置映射到与电子设备的显示屏平行的一个平面上，得到多个映射点，然后确定多个映射点中最靠近中间的映射点对应的位置的用户为目标对象，最后，针对目标对象进行眼球追踪，从而，可针对多个用户中最中间的用户进行眼球跟踪。
[0046] 本申请实施例中，红外灯发射红外光照射到目标对象的眼球后，会在目标对象的瞳孔上形成光斑，目标对象在观看视频聊天画面的过程中，若目标对象的视线发生变化，瞳孔在眼球区域的位置会发生变化，因此，通过前置摄像头追踪目标对象的眼球关注视频聊天画面的焦点区域，具体地，前置摄像头可追踪瞳孔位置变化，对瞳孔位置进行定位，然后，根据瞳孔位置确定用户眼球关注视频聊天画面中的第一位置。
[0047] 可选地，上述步骤102中，通过所述前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置，可包括以下步骤：
[0048] 21、在所述前置红外灯对目标对象进行照射时，通过所述前置摄像头获取所述目标对象的人眼图像；
[0049] 22、将所述人眼图像进行人眼特征提取，得到所述目标对象的瞳孔特征点；
[0050] 23、根据所述瞳孔特征点确定所述瞳孔在所述人眼图像中的瞳孔位置；
[0051] 24、根据所述瞳孔位置确定所述第一位置。
[0052] 本申请实施例中，前置摄像头可通过预设的工作频率获取人眼图像，从而，可实时追踪用户的眼球的视线是否移动。具体地，可在红外灯发射的红外光照射到目标对象的眼球时，通过前置摄像头获取所述目标对象的人眼图像，如图1E所示，图1E为本申请实施例提供的一种人眼图像的演示示意图，其中，可通过对人眼图像进行人眼特征提取，得到目标对应的瞳孔特征点，然后，根据瞳孔特征点确定瞳孔在人眼图像中的瞳孔位置。最后，将瞳孔位置转换成用户眼球关注视频聊天画面中的第一位置。
[0053] 可选地，上述步骤24中，根据所述瞳孔位置确定所述第一位置，可包括以下步骤：
[0054] A1、获取所述前置摄像头的工作参数和所述显示屏的显示参数；
[0055] A2、根据所述工作参数和所述显示参数将所述瞳孔位置转换为所述第一位置。
[0056] 其中，根据所述瞳孔位置确定所述第一位置，可将瞳孔位置转换为视频聊天画面中用户关注的第一位置。
[0058] 其中，根据所述工作参数和所述显示参数将所述瞳孔位置转换为所述第一位置，具体可根据前置摄像头的分辨率、前置摄像头的拍摄角度或前置摄像头在电子设备上的位置，显示屏的分辨率或显示屏的倾斜角度将人眼图像中的瞳孔位置转换成用户关注视频聊天画面中的第一位置。
[0059] 103、在所述眼球关注所述第一位置的第一关注时长超过第一预设时长时，所述处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整。
[0060] 本申请实施例中，在前置摄像头以预设频率获取人眼图像的过程中，可记录每一次获取人眼图像的时刻，若根据连续多个时刻获取的多个人眼图像均追踪到目标对象的眼球关注视频聊天画面中的第一位置，则可根据记录的多个时刻确定目标对应关注第一时刻的第一关注时长。可预先设定第一预设时长，从而，在眼球关注所述第一位置的第一关注时长超过第一预设时长时，通过处理器将多个视频窗口中与第一位置对应的目标视频窗口进行调整。
[0061] 其中，处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整的调整方式可包括以下至少一种：将目标视频窗口进行放大或缩小显示、将目标视频窗口的位置进行移动、将目标视频窗口进行图像增强处理，或者，在目标视频窗口添加特效、针对目标视频窗口的聊天成员发送预设信息等等。
[0062] 其中，将目标视频窗口进行放大显示，可将目标视频窗口放大至预设的显示面积，从而，用户可更加清楚地观看到放大后的目标视频窗口。具体地，可将目标视频窗口进行放大，得到放大后的目标视频窗口，目标视频窗口可能遮挡住其他视频窗口，此时，可将其他视频窗口进行缩小。
[0063] 其中，将目标视频窗口的位置进行移动，具体地，可根据多个视频窗口的当前布局情况确定将目标视频窗口移动至哪一位置，例如，可在目标视频窗口的位置处于视频聊天画面中靠近边缘的区域时，将目标视频窗口移动至视频聊天画面中的中间位置。
[0064] 其中，将目标视频窗口进行图像增强处理，具体地，图像增强处理可包括以下至少一种：图像去噪(例如，小波变换进行图像去噪)、图像复原(例如，维纳滤波)、暗视觉增强算法(例如，直方图均衡化、灰度拉伸等等)，在对目标视频窗口进行图像增强处理之后，目标视频窗口中的聊天成员的人脸图像的质量可在一定程度上得到提升，从而，可使目标对象更加清晰地观看到目标视频窗口的显示画面。
[0065] 其中，在目标视频窗口添加特效，可增加目标视频窗口的显示效果的趣味性，例如，可在目标视频窗口中的聊天成员添加特定表情特效。
[0066] 可选地，针对目标视频窗口的聊天成员发送预设信息，具体地，可在目标对象关注第一位置的第一关注时长大于第一预设时长时，针对目标视频窗口对应的聊天成员发送预设信息，预设信息可以是特定表情、特效等等，如此，目标视频窗口对应的聊天成员可收到该预设信息，并在聊天成员看到的目标对象对应的视频窗口观看到该预设信息，从而，可增加聊天的趣味性，使得聊天过程中的显示控制更加智能、便捷。
[0067] 可选地，上述步骤103中，处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整，可包括以下步骤：
[0068] 31、若所述第一位置不处于所述视频聊天画面中的预设显示区域，将所述目标视频窗口放大至预设显示面积，得到放大后的目标视频窗口；
[0069] 32、将所述放大后的目标视频窗口在所述预设显示区域进行显示。
[0070] 其中，上述预设显示区域可以是视频聊天画面中靠近中间的显示区域，也可以是视频聊天画面中，没有握持电子设备的用户手指遮挡的区域等等。请参阅图1F，图1F为本申请实施例提供的一种将第一位置对应的目标视频窗口进行调整的演示示意图，其中，若所述第一位置不处于所述视频聊天画面中的预设显示区域，表明目标视频窗口在靠近视频聊天画面的边缘的位置，此时，可将目标视频窗口放大至预设显示面积，得到放大后的目标视频窗口，然后放大后的目标视频窗口在预设显示区域进行显示。
[0071] 可见，通过追踪用户的眼球关注视频聊天画面的第一位置，并第一位置对应的目标视频窗口进行调整，可目标视频窗口的显示效果更加满足目标对象的观看需求，且无需目标对象进行手动调整目标视频窗口的显示效果，使得目标视频窗口显示控制过程更加便捷、智能。
[0072] 可选地，本申请实施例中，在所述根据所述第一位置控制所述后置摄像头进行对焦之后，还可包括以下步骤：
[0073] 在所述处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整之后，若所述前置摄像头检测到所述眼球未关注所述视频聊天画面，由所述处理器将调整后的所述目标视频窗口进行恢复。
[0074] 本申请实施例中，可在前置摄像头检测到眼球未关注视频聊天画面时，由处理器将调整后的目标视频窗口进行恢复，使多个视频窗口的布局方式恢复到调整之前的初始状态。
[0075] 可选地，本申请实施例中，还可在所述前置摄像头检测到所述眼球关注除多个视频窗口以外的其他区域，且关注该其他区域的第二关注时长超过第二关注时长时，由处理器将调整后的所述目标视频窗口进行恢复，使多个视频窗口的布局方式恢复到调整之前的初始状态。请参阅图1G，图1G为本申请实施例提供的一种将调整后的所述目标视频窗口进行恢复的演示示意图，其中，可在视频聊天画面中设置一个特定区域，该特定区域为多个视频窗口以外的区域，当追踪到目标对象的眼球关注该特定区域的第二关注时长超过第二关注时长时，可由处理器将调整后的所述目标视频窗口进行恢复。
[0076] 可以看出，本申请实施例中所描述的显示控制方法，应用于电子设备，电子设备包括处理器、显示屏和前置摄像头，当电子设备处于多人视频聊天状态时，处理器获取显示屏显示的视频聊天画面中多个视频窗口的视频窗口数量，在视频窗口数量超过预设数量时，通过前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置，在眼球关注第一位置的第一关注时长超过第一预设时长时，处理器将多个视频窗口中与第一位置对应的目标视频窗口进行调整，如此，可通过追踪目标对象眼球关注视频聊天画面中的位置，对目标对象关注的目标视频窗口进行调整，使视频窗口显示控制更加便捷、智能。
[0077] 请参阅图2，图2是本申请实施例提供的另一种显示控制方法的流程示意图，本实施例中所描述的显示控制方法，应用于如图1A所示的电子设备，所述电子设备包括处理器、显示屏和前置摄像头，该方法可包括以下步骤：
[0078] 201、当电子设备处于多人视频聊天状态时，处理器获取显示屏显示的视频聊天画面中多个视频窗口的视频窗口数量。
[0079] 202、在所述视频窗口数量超过预设数量时，且前置红外灯对目标对象进行照射时，通过所述前置摄像头获取所述目标对象的人眼图像。
[0080] 203、将所述人眼图像进行人眼特征提取，得到所述目标对象的瞳孔特征点。
[0081] 204、根据所述瞳孔特征点确定所述瞳孔在所述人眼图像中的瞳孔位置。
[0082] 205、根据所述瞳孔位置确定所述第一位置。
[0083] 206、在所述眼球关注所述第一位置的第一关注时长超过第一预设时长时，若所述第一位置不处于所述视频聊天画面中的预设显示区域，将所述目标视频窗口放大至预设显示面积，得到放大后的目标视频窗口。
[0084] 207、将所述放大后的目标视频窗口在所述预设显示区域进行显示。
[0085] 其中，上述步骤201-207的具体实现过程可参照步骤101-103中相应的描述，在此不再赘述。
[0086] 可以看出，本申请实施例中所描述的显示控制方法，当电子设备处于多人视频聊天状态时，处理器获取显示屏显示的视频聊天画面中多个视频窗口的视频窗口数量，在视频窗口数量超过预设数量，且前置红外灯对目标对象进行照射时，获取所述目标对象的人眼图像，将人眼图像进行人眼特征提取，得到所述目标对象的瞳孔特征点，根据瞳孔特征点确定所述瞳孔在所述人眼图像中的瞳孔位置，根据瞳孔位置确定第一位置，在眼球关注第一位置的第一关注时长超过第一预设时长时，若第一位置不处于视频聊天画面中的预设显示区域，将目标视频窗口放大至预设显示面积，得到放大后的目标视频窗口，将放大后的目标视频窗口在预设显示区域进行显示，如此，可通过追踪目标对象眼球关注视频聊天画面中的位置，对目标对象关注的目标视频窗口进行调整，使视频窗口显示控制更加便捷、智能。
[0087] 与上述一致地，请参阅图3，为本申请实施例提供的另一种显示控制方法的流程示意图，本实施例中所描述的显示控制方法，应用于如图1A所示的电子设备，所述电子设备包括应用处理器AP、桥接芯片IC和显示屏，所述桥接IC包括色彩空间转换模块，所述应用处理器AP与所述桥接IC连接，所述桥接IC与所述显示屏连接，该方法可包括以下步骤：
[0088] 301、当电子设备处于多人视频聊天状态时，处理器获取显示屏显示的视频聊天画面中多个视频窗口的视频窗口数量。
[0089] 302、在所述视频窗口数量超过预设数量时，通过所述前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置。
[0090] 303、在所述眼球关注所述第一位置的第一关注时长超过第一预设时长时，若所述第一位置不处于所述视频聊天画面中的预设显示区域，将所述目标视频窗口放大至预设显示面积，得到放大后的目标视频窗口。
[0091] 304、将所述放大后的目标视频窗口在所述预设显示区域进行显示。
[0092] 305、在所述处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整之后，若所述前置摄像头检测到所述眼球未关注所述视频聊天画面，由所述处理器将调整后的所述目标视频窗口进行恢复。
[0093] 其中，步骤301-305的具体实现过程可参见步骤101-103中相应的描述，在此不再赘述。
[0094] 可以看出，本申请实施例中所描述的显示控制方法，应用于电子设备，电子设备包括处理器、显示屏和前置摄像头，当电子设备处于多人视频聊天状态时，处理器获取显示屏显示的视频聊天画面中多个视频窗口的视频窗口数量，在视频窗口数量超过预设数量时，通过前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置，在眼球关注第一位置的第一关注时长超过第一预设时长时，处理器将多个视频窗口中与第一位置对应的目标视频窗口进行调整，在处理器将多个视频窗口中与第一位置对应的目标视频窗口进行调整之后，若前置摄像头检测到眼球未关注视频聊天画面，由处理器将调整后的目标视频窗口进行恢复，如此，可通过追踪目标对象眼球关注视频聊天画面中的位置，对目标对象关注的目标视频窗口进行调整，使视频窗口显示控制更加便捷、智能。
[0095] 以下是实施上述显示控制方法的装置，具体如下：
[0096] 与上述一致地，请参阅图4，图4是本申请实施例提供的一种电子设备的结构示意图，该电子设备包括：处理器410、显示屏430、前置红外灯440、前置摄像头450、通信接口460和存储器420；以及一个或多个程序，所述一个或多个程序421被存储在所述存储器中，并且被配置成由所述处理器执行，所述程序421包括用于执行以下步骤的指令：
[0097] 当所述电子设备处于多人视频聊天状态时，所述处理器获取所述显示屏显示的视频聊天画面中多个视频窗口的视频窗口数量；
[0098] 在所述视频窗口数量超过预设数量时，通过所述前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置；
[0099] 在所述眼球关注所述第一位置的第一关注时长超过第一预设时长时，所述处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整。
[0100] 在一个可能的示例中，所述电子设备还包括前置红外灯，在所述通过所述前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置方面，所述程序421包括用于执行以下步骤的指令：
[0101] 在所述前置红外灯对目标对象进行照射时，通过所述前置摄像头获取所述目标对象的人眼图像；
[0102] 将所述人眼图像进行人眼特征提取，得到所述目标对象的瞳孔特征点；
[0103] 根据所述瞳孔特征点确定所述瞳孔在所述人眼图像中的瞳孔位置；
[0104] 根据所述瞳孔位置确定所述第一位置。
[0105] 在一个可能的示例中，在所述根据所述瞳孔位置确定所述第一位置方面，所述程序421包括用于执行以下步骤的指令：
[0106] 获取所述前置摄像头的工作参数和所述显示屏的显示参数；
[0107] 根据所述工作参数和所述显示参数将所述瞳孔位置转换为所述第一位置。
[0108] 在一个可能的示例中，在所述处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整方面，所述程序421包括用于执行以下步骤的指令：
[0109] 若所述第一位置不处于所述视频聊天画面中的预设显示区域，将所述目标视频窗口放大至预设显示面积，得到放大后的目标视频窗口；
[0110] 将所述放大后的目标视频窗口在所述预设显示区域进行显示。
[0111] 在一个可能的示例中，所述程序421还包括用于执行以下步骤的指令：
[0112] 在所述处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整之后，若所述前置摄像头检测到所述眼球未关注所述视频聊天画面，由所述处理器将调整后的所述目标视频窗口进行恢复。
[0113] 请参阅图5，图5是本实施例提供的一种显示控制装置的结构示意图，应用于电子设备，所述电子设备包括显示屏、前置红外灯和前置摄像头，所述显示控制装置包括获取单元501、追踪单元502和调整单元503，其中，
[0114] 所述获取单元501，用于在所述电子设备处于多人视频聊天状态时，通过所述处理器获取所述显示屏显示的视频聊天画面中多个视频窗口的视频窗口数量；
[0115] 所述追踪单元502，用于在所述视频窗口数量超过预设数量时，通过所述前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置；
[0116] 所述调整单元503，用于在所述眼球关注所述第一位置的第一关注时长超过第一预设时长时，通过所述处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整。
[0117] 可选地，所述电子设备还包括前置红外灯，在所述通过所述前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置方面，所述追踪单元502具体用于：
[0118] 在所述前置红外灯对目标对象进行照射时，通过所述前置摄像头获取所述目标对象的人眼图像；
[0119] 将所述人眼图像进行人眼特征提取，得到所述目标对象的瞳孔特征点；
[0120] 根据所述瞳孔特征点确定所述瞳孔在所述人眼图像中的瞳孔位置；
[0121] 根据所述瞳孔位置确定所述第一位置。
[0122] 可选地，在所述根据所述瞳孔位置确定所述第一位置方面，所述追踪单元具体用于：
[0123] 获取所述前置摄像头的工作参数和所述显示屏的显示参数；
[0124] 根据所述工作参数和所述显示参数将所述瞳孔位置转换为所述第一位置。
[0125] 可选地，在所述处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整方面，所述调整单元503具体用于：
[0126] 若所述第一位置不处于所述视频聊天画面中的预设显示区域，将所述目标视频窗口放大至预设显示面积，得到放大后的目标视频窗口；
[0127] 将所述放大后的目标视频窗口在所述预设显示区域进行显示。
[0128] 可选地，在所述处理器将所述多个视频窗口中与所述第一位置对应的目标视频窗口进行调整之后，若所述追踪单元通过所述前置摄像头检测到所述眼球未关注所述视频聊天画面，所述调整单元503还用于：
[0129] 通过所述处理器将调整后的所述目标视频窗口进行恢复。
[0130] 可以看出，本申请实施例中所描述的显示控制装置，应用于电子设备，电子设备包括处理器、显示屏和前置摄像头，当电子设备处于多人视频聊天状态时，处理器获取显示屏显示的视频聊天画面中多个视频窗口的视频窗口数量，在视频窗口数量超过预设数量时，通过前置摄像头追踪目标对象的眼球关注所述视频聊天画面中的第一位置，在眼球关注第一位置的第一关注时长超过第一预设时长时，处理器将多个视频窗口中与第一位置对应的目标视频窗口进行调整，如此，可通过追踪目标对象眼球关注视频聊天画面中的位置，对目标对象关注的目标视频窗口进行调整，使视频窗口显示控制更加便捷、智能。
[0131] 可以理解的是，本实施例的显示控制装置的各程序模块的功能可根据上述方法实施例中的方法具体实现，其具体实现过程可以参照上述方法实施例的相关描述，此处不再赘述。
[0132] 本申请实施例还提供了另一种电子设备，如图6所示，为了便于说明，仅示出了与本申请实施例相关的部分，具体技术细节未揭示的，请参照本申请实施例方法部分。该电子设备可以为包括手机、平板电脑、PDA(personal digital assistant，个人数字助理)、POS(point of sales，销售终端)、车载电脑等任意终端设备，以电子设备为手机为例：
[0133] 图6示出的是与本申请实施例提供的电子设备相关的手机的部分结构的框图。参考图6，手机包括：射频(Radio Frequency，RF)电路910、存储器920、输入单元930、显示单元940、传感器950、音频电路960、无线保真(Wireless Fidelity，Wi-Fi)模块970、处理器980、以及电源990、摄像头9100、以及前置红外灯9200部件。本领域技术人员可以理解，图6中示出的手机结构并不构成对手机的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
[0134] 下面结合图6对手机的各个构成部件进行具体的介绍：
[0135] RF电路910可用于信息的接收和发送。通常，RF电路910包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(Low Noise Amplifier，LNA)、双工器等。此外，RF电路910还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议，包括但不限于全球移动通讯系统(Global System of Mobile communication，GSM)、通用分组无线服务(General Packet Radio Service，GPRS)、码分多址(Code Division Multiple Access，CDMA)、宽带码分多址(Wideband Code Division Multiple Access,WCDMA)、长期演进(Long Term Evolution，LTE)、电子邮件、短消息服务(Short Messaging Service，SMS)等。
[0136] 存储器920可用于存储软件程序以及模块，处理器980通过运行存储在存储器920的软件程序以及模块，从而执行手机的各种功能应用以及数据处理。存储器920可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序等；存储数据区可存储根据手机的使用所创建的数据等。此外，存储器920可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
[0137] 输入单元930可用于接收输入的数字或字符信息，以及产生与手机的用户设置以及功能控制有关的键信号输入。具体地，输入单元930可包括指纹识别模组931以及其他输入设备932。指纹识别模组931，可采集用户在其上的指纹数据。除了指纹识别模组931，输入单元930还可以包括其他输入设备932。具体地，其他输入设备932可以包括但不限于触控屏、物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
[0138] 显示单元940可用于显示由用户输入的信息或提供给用户的信息以及手机的各种菜单。显示单元940可包括显示屏941，可选的，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机或无机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示屏941。
[0139] 手机还可包括至少一种传感器950，比如光传感器、运动传感器、压力传感器、温度传感器以及其他传感器。具体地，光传感器可包括环境光传感器(也称为光线传感器)及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节手机的背光亮度，进而调节显示屏941的亮度，接近传感器可在手机移动到耳边时，关闭显示屏941和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态的应用(比如横竖屏切换、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；至于手机还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。
[0140] 音频电路960、扬声器961，传声器962可提供用户与手机之间的音频接口。音频电路960可将接收到的音频数据转换后的电信号，传输到扬声器961，由扬声器961转换为声音信号播放；另一方面，传声器962将收集的声音信号转换为电信号，由音频电路960接收后转换为音频数据，再将音频数据播放处理器980处理后，经RF电路910以发送给比如另一手机，或者将音频数据播放至存储器920以便进一步处理。
[0141] Wi-Fi属于短距离无线传输技术，手机通过Wi-Fi模块970可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图6示出了Wi-Fi模块970，但是可以理解的是，其并不属于手机的必须构成，完全可以根据需要在不改变发明的本质的范围内而省略。
[0142] 处理器980是手机的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在存储器920内的软件程序和/或模块，以及调用存储在存储器920内的数据，执行手机的各种功能和处理数据，从而对手机进行整体监控。可选的，处理器980可包括一个或多个处理单元；优选的，处理器980可集成应用处理器AP和调制解调处理器，其中，应用处理器AP主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器980中。
[0143] 手机还包括给各个部件供电的电源990(比如电池)，优选的，电源可以通过电源管理系统与处理器980逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
[0144] 手机还可以包括摄像头9100，摄像头9100可包括前置RGB摄像头，前置RGB摄像头可以用于获取彩色图像，并将拍摄的图像传输到处理器980进行处理。
[0145] 手机还可以包括蓝牙模块等，在此不再赘述。
[0146] 前述图1B、图2和图3所示的实施例中，各步骤方法流程可以基于该手机的结构实现。
[0147] 本申请实施例还提供一种计算机可读存储介质，其中，该计算机可读存储介质存储用于电子数据交换的计算机程序，该计算机程序使得计算机执行如上述显示控制方法实施例中记载的任一方法的部分或全部步骤，上述计算机包括电子设备。
[0148] 本申请实施例还提供一种计算机程序产品，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如上述方法实施例中记载的任一显示控制方法的部分或全部步骤。该计算机程序产品可以为一个软件安装包，上述计算机包括电子设备。
[0149] 需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请并不受所描述的动作顺序的限制，因为依据本申请，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本申请所必须的。
[0150] 在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
[0151] 在本申请所提供的几个实施例中，应该理解到，所揭露的装置，可通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如上述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性或其它的形式。
[0152] 上述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
[0153] 另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
[0154] 上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储器中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储器中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。而前述的存储器包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
[0155] 本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储器中，存储器可以包括：闪存盘、只读存储器(英文：Read-Only Memory，简称：ROM)、随机存取器(英文：Random Access Memory，简称：RAM)、磁盘或光盘等。
[0156] 以上对本申请实施例进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。
| 标题 | 发布/更新时间 | 阅读量 |
|---|---|---|
| 自动匹配乘员的电梯广告投放系统 | 2020-05-17 | 929 |
| 眼动追踪设备的拍摄参数调整方法、装置、设备及介质 | 2020-05-26 | 368 |
| 折叠屏防偷窥方法与具有防偷窥功能的折叠屏电子设备 | 2020-05-15 | 547 |
| 提醒方法、系统、终端及车辆 | 2020-05-12 | 836 |
| 图像显示方法、装置、终端及存储介质 | 2020-05-19 | 215 |
| 一种多任务智能协调方法、设备和系统 | 2020-05-19 | 683 |
| 显示控制方法及相关产品 | 2020-05-23 | 200 |
| 一种基于眼球追踪的面部表情控制方法及系统 | 2020-05-13 | 737 |
| 一种穿戴式视觉跟踪采集图像设备 | 2020-05-18 | 552 |
| 基于眼球追踪的电动内后视镜 | 2020-05-13 | 360 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台，是提供专利分析，专利查询，专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据，免费查、免费专利分析。
分析报告
专利汇分析报告产品可以对行业情报数据进行梳理分析，涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度，系统通过AI智能系统对图表进行解读，只需1分钟，一键生成行业专利分析报告。
眼球追踪摄像头热门专利
QQ群二维码
意见反馈
意见反馈