首页 / 专利库 / 视听技术与设备 / 眼球追踪摄像头 / 一种基于眼球追踪的商品浏览方法及系统

一种基于眼球追踪的商品浏览方法及系统

阅读:675发布:2020-08-22

专利汇可以提供一种基于眼球追踪的商品浏览方法及系统专利检索,专利查询,专利分析的服务。并且本 发明 提供的一种基于眼球追踪的商品浏览方法及系统,通过利用一个具有眼球追踪功能的 图像采集 设备对用户的眼球运动状态进行 定位 跟踪 ,此图像采集设备的前摄像头获取用户的眼睛信息,此图像采集设备的后摄像头获取商品图像,通过对用户眼球在商品图像上的凝视坐标进行定位,并根据定位出的凝视坐标对商品图像进行放大显示,从而可以使用户快速的获取商品图像中的商品信息,从中选择出所需的商品。,下面是一种基于眼球追踪的商品浏览方法及系统专利的具体信息内容。

1.一种基于眼球跟踪的商品浏览方法,其特征在于,利用具有眼球跟踪功能的图像采集设备进行商品浏览;所述图像采集设备具有前后两个摄像头;所述方法包括:
A、图像采集设备的后摄像头用于采集商品图像,并将采集到的商品图像显示在图像采集设备的显示屏上;同时,图像采集设备的前摄像头采集用户的眼球运动获取眼球状态信息;所述眼球状态信息包括眼球凝视图像采集设备屏幕的凝视坐标;
B、对所述凝视坐标在预定时间内其坐标位置是否超出预定区域进行判断,若未超出,则触发图像采集设备将采集到的商品图像放大显示,否则重复步骤A。
2.根据权利要求1所述基于眼球跟踪的商品浏览方法,其特征在于,在上述步骤B中图像采集设备将采集到的商品图像放大显示的方法为:
B11、将图像采集设备后摄像头的焦点位置设置到该凝视坐标;
B12、对图像采集设备后摄像头的焦距值进行判断,若后摄像头目前的焦距值小于其最大焦距,则根据下面公式对后摄像头的焦距值进行放大:
放大后的焦距值=目前焦距值+(最大焦距-目前焦距)/2;
B13、所述图像采集设备后摄像头的焦距值放大完成后,重新获取商品图像,并将其在图像采集设备的显示屏上显示。
3.根据权利要求1所述基于眼球跟踪的商品浏览方法,其特征在于,在上述步骤B中图像采集设备将采集到的商品图像放大显示的方法为:
B21、将商品图像的中心点设置到该凝视坐标;
B22、根据预设半径和放大倍数对所述商品图像中以凝视坐标为圆点、以预设半径为半径的圆形区域进行放大;
B23、将放大后的商品图像在图像采集设备的显示屏上显示。
4.根据权利要求1所述基于眼球跟踪的商品浏览方法,其特征在于,在上述步骤B中图像采集设备将采集到的商品图像放大显示的方法为:
B31、从商品图像中截取出以预先设定的半径为半径、以所述凝视坐标为圆点的圆形区域;
B32、根据预先设定的放大倍数,对截取出的所述圆形区域进行放大;
B33、将放大后的所述圆形区域的商品图像在图像采集设备的显示屏上显示。
5.根据权利要求1-4任一项所述基于眼球跟踪的商品浏览方法,其特征在于,所述商品图像中包括商品的二维码和商品包装上的文字信息。
6.一种基于眼球跟踪的商品浏览系统,其特征在于,利用具有眼球跟踪功能的图像采集设备进行商品浏览;所述图像采集设备具有前后两个摄像头;所述系统包括:
图像采集模、用于通过图像采集设备的后摄像头采集商品图像,并将采集到的商品图像显示在图像采集设备的显示屏上;同时,使用图像采集设备的前摄像头采集用户的眼球运动获取眼球状态信息;所述眼球状态信息包括眼球凝视图像采集设备屏幕的凝视坐标;
图像放大模块、用于对所述凝视坐标在预定时间内其坐标位置是否超出预定区域进行判断,若未超出,则触发图像采集设备将采集到的商品图像放大显示。
7.根据权利要求6所述基于眼球跟踪的商品浏览系统,其特征在于,在图像放大模块中包括以下单元:
焦点设置单元、用于将图像采集设备后摄像头的焦点位置设置到该凝视坐标;
焦距放大单元、用于对图像采集设备后摄像头的焦距值进行判断,若后摄像头目前的焦距值小于其最大焦距,则根据下面公式对后摄像头的焦距值进行放大:
放大后的焦距值=目前焦距值+(最大焦距-目前焦距)/2;
第一放大显示单元、所述图像采集设备后摄像头的焦距值放大完成后,重新获取商品图像,并将其在图像采集设备的显示屏上显示。
8.根据权利要求6所述基于眼球跟踪的商品浏览系统,其特征在于,在图像放大模块中包括以下单元:
中心设置单元、用于将商品图像的中心点设置到该凝视坐标;
区域放大单元、用于根据预设半径和放大倍数对所述商品图像中以凝视坐标为圆点、以预设半径为半径的圆形区域进行放大;
第二放大显示单元、将放大后的商品图像在图像采集设备的显示屏上显示。
9.根据权利要求6所述基于眼球跟踪的商品浏览系统,其特征在于,在图像放大模块中包括以下单元:
截取图像单元、用于从商品图像中截取出以预先设定的半径为半径、以所述凝视坐标为圆点的圆形区域;
截图放大单元、用于根据预先设定的放大倍数,对截取出的所述圆形区域进行放大;
第三放大显示单元、用于将放大后的所述圆形区域的商品图像在图像采集设备的显示屏上显示。
10.根据权利要求6-8任一项所述基于眼球跟踪的商品浏览系统,其特征在于,所述商品图像中包括商品的二维码和商品包装上的文字信息。

说明书全文

一种基于眼球追踪的商品浏览方法及系统

[0001] 技术领域 本发明涉及智能终端设备领域,尤其涉及的是一种基于眼球追踪的商品浏览方法及系统。

背景技术

[0002] 一方面,在现有技术中,眼球跟踪技术是近年来新兴的一项体感技术。该技术通过电子设备上的摄像头捕捉并跟踪用户眼球的状态及变化(如眼球的“闪烁”以及眼网膜的反射等),进而解析用户当前凝视的屏幕位置,最终通过跟踪用户眼球的活动来实现电子设备进行控制的目的。
[0003] 例如在2010年8月的自动化学报上一篇名为《视线追踪系统中眼睛跟踪方法研究》的文章中具体讲述了如何通过对眼睛跟踪解析出当前眼睛凝视的屏幕位置,此位置被称之为凝视坐标。眼球跟踪技术由于其新颖而方便的体感效果而备受用户青睐。
[0004] 另一方面,当人们进入超市,琳琅满目的商品让人目不暇接,那么如何快速的找到自己所要的商品,并快速的掌握商品信息,成为人们迫切需要解决的事情,而目前的电子设备还不具有利用眼球跟踪技术来解决上述问题功能。
[0005] 因此,现有技术存在缺陷,有待于改进和发展。

发明内容

[0006] 本发明的目的在于针对上述现有技术中的电子设备还不具有利用眼球追踪技术实现商品快速浏览的缺陷,提供一种基于眼球追踪的商品浏览方法及系统,实现用户通过一个具有眼球追踪技术的图像采集设备,轻松快速的挑选出需要的商品,为用户提供便利。
[0007] 本发明的技术方案如下:一种基于眼球跟踪的商品浏览方法,其中,利用具有眼球跟踪功能的图像采集设备进
行商品浏览;所述图像采集设备具有前后两个摄像头;所述方法包括:
A、图像采集设备的后摄像头用于采集商品图像,并将采集到的商品图像显示在图像采
集设备的显示屏上;同时,图像采集设备的前摄像头采集用户的眼球运动获取眼球状态信息;所述眼球状态信息包括眼球凝视图像采集设备屏幕的凝视坐标;
B、对所述凝视坐标在预定时间内其坐标位置是否超出预定区域进行判断,若未超出,
则触发图像采集设备将采集到的商品图像放大显示,否则重复步骤A。
[0008] 所述基于眼球跟踪的商品浏览方法,其中,在上述步骤B中图像采集设备将采集到的商品图像放大显示的方法为:B11、将图像采集设备后摄像头的焦点位置设置到该凝视坐标;
B12、对图像采集设备后摄像头的焦距值进行判断,若后摄像头目前的焦距值小于其最
大焦距,则根据下面公式对后摄像头的焦距值进行放大:
放大后的焦距值=目前焦距值+(最大焦距-目前焦距)/2;
B13、所述图像采集设备后摄像头的焦距值放大完成后,重新获取商品图像,并将其在
图像采集设备的显示屏上显示。
[0009] 所述基于眼球跟踪的商品浏览方法,其中,在上述步骤B中图像采集设备将采集到的商品图像放大显示的方法为:B21、将商品图像的中心点设置到该凝视坐标;
B22、根据预设半径和放大倍数对所述商品图像中以凝视坐标为圆点、以预设半径为半
径的圆形区域进行放大;
B23、将放大后的商品图像在图像采集设备的显示屏上显示。
[0010] 所述基于眼球跟踪的商品浏览方法,其中,在上述步骤B中图像采集设备将采集到的商品图像放大显示的方法为:B31、从商品图像中截取出以预先设定的半径为半径、以所述凝视坐标为圆点的圆形区
域;
B32、根据预先设定的放大倍数,对截取出的所述圆形区域进行放大;
B33、将放大后的所述圆形区域的商品图像在图像采集设备的显示屏上显示。
[0011] 所述基于眼球跟踪的商品浏览方法,其中,所述商品图像中包括商品的二维码和商品包装上的文字信息。
[0012] 一种基于眼球跟踪的商品浏览系统,其中,利用具有眼球跟踪功能的图像采集设备进行商品浏览;所述图像采集设备具有前后两个摄像头;所述系统包括:图像采集模、用于通过图像采集设备的后摄像头采集商品图像,并将采集到的商品
图像显示在图像采集设备的显示屏上;同时,使用图像采集设备的前摄像头采集用户的眼球运动获取眼球状态信息;所述眼球状态信息包括眼球凝视图像采集设备屏幕的凝视坐
标;
图像放大模块、用于对所述凝视坐标在预定时间内其坐标位置是否超出预定区域进行
判断,若未超出,则触发图像采集设备将采集到的商品图像放大显示。
[0013] 所述基于眼球跟踪的商品浏览系统,其中,在图像放大模块中包括以下单元:焦点设置单元、用于将图像采集设备后摄像头的焦点位置设置到该凝视坐标;
焦距放大单元、用于对图像采集设备后摄像头的焦距值进行判断,若后摄像头目前的
焦距值小于其最大焦距,则根据下面公式对后摄像头的焦距值进行放大:
放大后的焦距值=目前焦距值+(最大焦距-目前焦距)/2;
第一放大显示单元、所述图像采集设备后摄像头的焦距值放大完成后,重新获取商品
图像,并将其在图像采集设备的显示屏上显示。
[0014] 所述基于眼球跟踪的商品浏览系统,其中,在图像放大模块中包括以下单元:中心设置单元、用于将商品图像的中心点设置到该凝视坐标;
区域放大单元、用于根据预设半径和放大倍数对所述商品图像中以凝视坐标为圆点、
以预设半径为半径的圆形区域进行放大;
第二放大显示单元、将放大后的商品图像在图像采集设备的显示屏上显示。
[0015] 所述基于眼球跟踪的商品浏览系统,其中,在图像放大模块中包括以下单元:截取图像单元、用于从商品图像中截取出以预先设定的半径为半径、以所述凝视坐标
为圆点的圆形区域;
截图放大单元、用于根据预先设定的放大倍数,对截取出的所述圆形区域进行放大;
第三放大显示单元、用于将放大后的所述圆形区域的商品图像在图像采集设备的显示
屏上显示。
[0016] 所述基于眼球跟踪的商品浏览系统,其中,所述商品图像中包括商品的二维码和商品包装上的文字信息。
[0017] 有益效果:本发明所提供的一种基于眼球追踪的商品浏览方法及系统,通过使用一个具有眼球追踪功能的图像采集设备,此图像采集设备的前摄像头获取用户的眼睛信息,此图像采集设备的后摄像头获取商品图像,通过对用户眼球的在商品图像上的凝视坐标进行定位,并根据凝视坐标对吸引用户的商品图像进行放大显示,从而可以使用户快速的获取商品图像中的商品信息,从中选择出所需的商品。
附图说明
[0018] 图1为本发明提供的一种基于眼球追踪的商品浏览方法的具体实施例的步骤流程图。
[0019] 图2为本发明提供的图像采集设备获取商品图像和对用户的眼球运动进行追踪的示意图。
[0020] 图3为本发明所述方法中放大商品图像的第一实施例的方法步骤流程图
[0021] 图4为本发明所述方法中放大商品图像的第二实施例的方法步骤流程图。
[0022] 图5为本发明所述方法中放大商品图像的第二实施例的方法示意图。
[0023] 图6为本发明所述方法中放大商品图像的第三实施例的方法步骤流程图。
[0024] 图7为本发明提供的一种基于眼球追踪的商品浏览系统的结构原理图。

具体实施方式

[0025] 本发明提供了一种基于眼球追踪的商品浏览方法及系统,以下对结合附图本发明的实施例加以详细说明。
[0026] 本发明提供的一种基于眼球追踪的商品浏览方法,所述方法利用一具有眼球跟踪功能的图像采集设备对用户的眼球运动进行跟踪实现商品的快速浏览;所述图像采集设备具有前后两个摄像头;如图1所示,所述方法具体包括以下步骤:S1、图像采集设备的后摄像头用于采集商品图像,并将采集到的商品图像显示在图像
采集设备的显示屏上;同时,图像采集设备的前摄像头采集用户的眼球运动获取眼球状态信息;所述眼球状态信息包括眼球凝视图像采集设备屏幕的凝视坐标。
[0027] 下面结合图2所示图像采集设备获取商品图像和对用户的眼球运动进行追踪的示意图,对本步骤进行解释。
[0028] 当用户1手持图像采集设备2进入商场后,在浏览商品时,将图像采集设备的正方对准用户1的脸,背面对准商品,当前后方均对准之后,同时开启图像采集设备的前后摄像头。
[0029] 具体的,图像采集设备2的后摄像头,用于对其对面的商品进行拍摄,并将其拍摄到的商品图像在图像采集设备2的显示屏上显示出来。
[0030] 同时,图像采集设备2的前摄像头,用于对其前方的用户1的眼球运动状态进行追踪。用户1的眼睛在观看显示屏上显示出的商品图像时,具有眼球追踪技术的图像采集设备2对用户眼球在屏幕上注视时凝视在屏幕上的某一个点进行定位,获取用户1的眼睛在显示屏上的凝视坐标。
[0031] S2、对所述凝视坐标在预定时间内其坐标位置是否超出预定区域进行判断,若未超出,则触发图像采集设备将采集到的商品图像放大显示,否则重复步骤S1。
[0032] 图像采集设备对对用户眼球在屏幕上注视时凝视在屏幕上的某一个点进行定位之后,获取到用户的眼睛凝视在屏幕上的凝视坐标,对该凝视坐标在预定时间发生的变化进行判断,如果其在预定时间内,比如一秒内位置发生超出预定区域的情况,则说明用户在预定区域内没有看到需要的商品,则不需要对获取的商品图像进行放大,供用户进一步的对该区域内的商品进行了解。如果在预定时间内,凝视坐标未超出预定的区域,则判定在此区域内,可能会有用户需要的商品,则选择对后摄像头采集到的商品图像进行放大处理,并通过显示屏进行显示。
[0033] 可以想到的是,所述预定时间可以为图像采集设备默认的时间也可以由用户自行设定,所述预定区域可以为图像采集设备默认的区域,也可以由用户自行设定。
[0034] 具体的,为了更好的实现上述步骤S2中图像采集设备将采集到的商品图像放大显示,以下提供了三种不同实施方式的图像方法显示方法。
[0035] 如图3所示,所述商品图像放大显示方法的第一实施例的方法步骤流程图,如图所述,所述方法步骤如下:S11、将图像采集设备后摄像头的焦点位置设置到该凝视坐标。
[0036] 首先将后摄像头的焦点位置设置在用户眼睛凝视在图像采集设备的显示屏的凝视坐标上。
[0037] S12、对图像采集设备后摄像头的焦距值进行判断,若后摄像头目前的焦距值小于其最大焦距,则根据下面公式对后摄像头的焦距值进行放大:放大后的焦距值=目前焦距值+(最大焦距-目前焦距)/2。
[0038] 在进行后摄像头的焦距放大之前,首先对后摄像头的焦距是否已经达到最大进行判断,如果已经达到最大,则此方法则失效,因为不能通过放大后摄像头的焦距来对商品图像进行放大;若后摄像头的焦距还有放大的空间,则通过将其目前所处的焦距值加上其最大焦距与其目前焦距差的一半作为放大后的焦距值,对后摄像头的焦距值进行放大。
[0039] S13、所述图像采集设备后摄像头的焦距值放大完成后,重新获取商品图像,并将其在图像采集设备的显示屏上显示。
[0040] 使用焦距值放大后的后摄像头重新获取商品图像,并将新获取的商品图像在显示屏上显示,供用户更清晰的浏览商品。
[0041] 如图4所示,所述商品图像放大显示方法的第二实施例的方法步骤流程图,如图所述,所述方法步骤如下:S21、将商品图像的中心点设置到该凝视坐标。
[0042] 将后摄像头获取的商品图像中心点移动到凝视坐标上。
[0043] S22、根据预设半径和放大倍数对所述商品图像中以凝视坐标为圆点、以预设半径为半径的圆形区域进行放大。
[0044] 根据用户预设半径和放大倍数或者图像采集设备默认的半径和放大倍数对上述商品图像进行放大,具体的所述以凝视坐标为圆点,以预设或者默认的半径为半径对此圆形区域内的商品图像进行放大。
[0045] 具体的,如图5所示,首先对用户1的眼球运动状态进行追踪,获取在图像采集设备2定位出的凝视坐标,根据预设的半径和以凝视坐标为圆点对商品图像上圈出的圆心区域进行放大。
[0046] S23、将放大后的商品图像在图像采集设备的显示屏上显示。
[0047] 如图6所示,所述商品图像放大显示方法的第三实施例的方法步骤流程图,如图所述,所述方法步骤如下:S31、从商品图像中截取出以预先设定的半径为半径、以所述凝视坐标为圆点的圆形区
域。
[0048] 本步骤中,首先从商品图像中根据预先设定的半径值和以凝视坐标为圆点,将此圆形区域内的商品图像截取出来。
[0049] S32、根据预先设定的放大倍数,对截取出的所述圆形区域进行放大。
[0050] 对截取出的圆形区域的商品图像进行放大处理,具体的放大倍数可以为预先设定也可以为图像采集设备默认的数值。
[0051] S33、将放大后的所述圆形区域的商品图像在图像采集设备的显示屏上显示。
[0052] 具体的,所述商品图像中包括商品的二维码和商品包装上的文字信息;通过上述三种方法将商品图像进行放大后,商品图像中的所包含的商品信息也可以很清晰的呈现在用户面前。所述商品图像中所包含的商品信息除了商品的外观之外还有商品的二维码和包装上的文字信息,供用户进行挑选。
[0053] 可以想到的是,上述将商品图像进行放大的方法可以为通过固定的放大倍数进行放大,也可以将其设置为逐步放大,直到用户感觉最佳为止,也可以设置为自动放大和用户手动放大相结合。
[0054] 在所述方法的基础上,本发明还提供了一种基于眼球跟踪的商品浏览系统,利用具有眼球跟踪功能的图像采集设备进行商品浏览;所述图像采集设备具有前后两个摄像头;如图7所示,所述系统包括以下模块:
图像采集模块10、用于通过图像采集设备的后摄像头采集商品图像,并将采集到的商
品图像显示在图像采集设备的显示屏上;同时,使用图像采集设备的前摄像头采集用户的眼球运动获取眼球状态信息;所述眼球状态信息包括眼球凝视图像采集设备屏幕的凝视坐标;具体如步骤S1所述。
[0055] 图像放大模块20、用于对所述凝视坐标在预定时间内其坐标位置是否超出预定区域进行判断,若未超出,则触发图像采集设备将采集到的商品图像放大显示;具体如步骤S1所述。
[0056] 在图像放大模块中包括以下单元:焦点设置单元、用于将图像采集设备后摄像头的焦点位置设置到该凝视坐标;
焦距放大单元、用于对图像采集设备后摄像头的焦距值进行判断,若后摄像头目前的
焦距值小于其最大焦距,则根据下面公式对后摄像头的焦距值进行放大:
放大后的焦距值=目前焦距值+(最大焦距-目前焦距)/2;
第一放大显示单元、所述图像采集设备后摄像头的焦距值放大完成后,重新获取商品
图像,并将其在图像采集设备的显示屏上显示。
[0057] 所述基于眼球跟踪的商品浏览系统,其中,在图像放大模块中包括以下单元:中心设置单元、用于将商品图像的中心点设置到该凝视坐标;
区域放大单元、用于根据预设半径和放大倍数对所述商品图像中以凝视坐标为圆点、
以预设半径为半径的圆形区域进行放大;
第二放大显示单元、将放大后的商品图像在图像采集设备的显示屏上显示。
[0058] 在图像放大模块中包括以下单元:截取图像单元、用于从商品图像中截取出以预先设定的半径为半径、以所述凝视坐标
为圆点的圆形区域;
截图放大单元、用于根据预先设定的放大倍数,对截取出的所述圆形区域进行放大;
第三放大显示单元、用于将放大后的所述圆形区域在图像采集设备的显示屏上显示。
[0059] 所述商品图像中包括商品的二维码和商品包装上的文字信息。
[0060] 本发明提供的一种基于眼球追踪的商品浏览方法及系统,通过使用一个具有眼球追踪功能的图像采集设备,此图像采集设备的前摄像头获取用户的眼睛信息,此图像采集设备的后摄像头获取商品图像,通过对用户眼球在商品图像上的凝视坐标进行定位,并根据凝视坐标对吸引用户的商品图像进行放大显示,从而可以使用户快速的获取商品图像中的商品信息,从中选择出所需的商品。
[0061] 应当理解的是,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,而所有这些改进和变换都应属于本发明所附权利要求的保护范围。
高效检索全球专利

专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。

申请试用

分析报告

专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。

申请试用

QQ群二维码
意见反馈