一种图像传感器、移动终端及图像拍摄方法专利检索-互补金属氧化物半导体半导体电气元件和设备专利检索查询-专利查询网

一种图像 传感器、移动终端及图像拍摄方法

阅读：461发布：2020-05-11

专利汇可以提供一种图像传感器、移动终端及图像拍摄方法专利检索，专利查询，专利分析的服务。并且本发明提供了一种图像传感器、移动终端及图像拍摄方法，图像传感器的像素阵列包括预设数目个像素单元，像素单元包括全像素双核对焦的第一和第二像素，第一像素包括红绿蓝子像素，第二像素包括红蓝子像素中的至少一种以及绿和红外子像素；第二像素中的红外子像素与红、绿、蓝、第一组合或第二组合子像素在第一像素中的位置相同，第一组合子像素是相邻的1/2红绿子像素；第二组合子像素是相邻的1/2绿蓝子像素；或者1/2红外子像素在第二像素中的位置，与1/2红1/2绿或1/2蓝子像素在第一像素中的位置相同，两个相邻第二像素中的1/2红外子像素形成红外子像素。本发明可实现快速对焦和背景虚化，实现拍照立体相关应用功能。，下面是一种图像传感器、移动终端及图像拍摄方法专利的具体信息内容。

权利要求

1.一种图像传感器，其特征在于，包括：
像素阵列，所述像素阵列包括按照预定方式排布的预设数目个像素单元，所述像素单元包括第一像素和与所述第一像素位置相邻的第二像素，所述第一像素包括红色子像素、绿色子像素和蓝色子像素，所述第二像素包括所述红色子像素和所述蓝色子像素中的至少一种以及所述绿色子像素和红外子像素，且所述第一像素和所述第二像素均为全像素双核对焦像素，所述第一像素和所述第二像素中各包括四个全像素双核对焦子像素；
其中，所述红外子像素在所述第二像素中的位置与所述红色子像素、所述绿色子像素、所述蓝色子像素、第一组合子像素或者第二组合子像素在所述第一像素中的位置相同，所述第一组合子像素是位置相邻的1/2红色子像素和1/2绿色子像素的组合，所述第二组合子像素是位置相邻的1/2绿色子像素和1/2蓝色子像素的组合，此时，所述像素单元中包括一个所述第二像素以及至少一个所述第一像素；
或者
1/2红外子像素在所述第二像素中的位置，与1/2红色子像素、1/2绿色子像素或者1/2蓝色子像素在所述第一像素中的位置相同，且两个相邻所述第二像素中的1/2红外子像素组合形成一完整的所述红外子像素，此时，在所述像素单元中，所述第二像素的数量为两个，所述第一像素的数量大于或者等于零。
2.根据权利要求1所述的图像传感器，其特征在于，
所述红色子像素包括依次堆叠设置的半导体层、金属层、光电二极管、红色滤光片以及微镜；
所述绿色子像素包括依次堆叠设置的半导体层、金属层、光电二极管、绿色滤光片以及微镜；
所述蓝色子像素包括依次堆叠设置的半导体层、金属层、光电二极管、蓝色滤光片以及微镜；
所述红外子像素包括依次堆叠设置的半导体层、金属层、光电二极管、红外滤光片以及微镜。
3.根据权利要求1所述的图像传感器，其特征在于，所述图像传感器为互补金属氧化物半导体CMOS图像传感器、电荷耦合元件CCD图像传感器或量子薄膜图像传感器。
4.一种移动终端，其特征在于，包括成像系统以及红外发射模块，所述成像系统包括如权利要求1至3任一项所述的图像传感器，还包括：
透镜模组；
用于驱动所述透镜模组移动的驱动模块；
设置于所述透镜模组与所述图像传感器之间的滤波模块；
与所述图像传感器连接的图像数据处理模块；以及
与所述图像数据处理模块连接的显示模块；
其中所述红外发射模块设置于所述透镜模组的周缘。
5.根据权利要求4所述的移动终端，其特征在于，所述滤波模块可通过380nm至1100nm的光波长。
6.一种图像拍摄方法，应用于移动终端，所述移动终端包括如权利要求1所述的图像传感器，还包括红外发射模块，其特征在于，所述方法包括：
通过所述红外发射模块发射红外光；
根据待拍摄对象所反射的红外光获取所述待拍摄对象上各个红外光反射点与所述移动终端之间的距离；
根据所述待拍摄对象上各个红外光反射点与所述移动终端之间的距离，对所述待拍摄对象进行立体信息获取。

说明书全文

一种图像传感器、移动终端及图像拍摄方法

技术领域

[0001] 本发明涉及图像处理技术领域，尤其涉及一种图像传感器、移动终端及图像拍摄方法。

背景技术

[0002] 目前，智能电子产品已经逐渐成为人们生活中的必需品，拍照功能作为电子产品的一重要配置也在逐渐发展。但随着拍照功能的推广和普及，人们已经不在满足当前的智能电子产品中摄像头仅有的拍照功能，更加期望实现拍照效果多样化、玩法多样化以及功能多样化。

[0003] 目前市场上，基于CMOS(Complementary Metal Oxide Semiconductor，互补金属氧化物半导体)的图像传感器像素阵列排布中，最常用的是R(红色)G(绿色)B(蓝色)拜耳像素阵列排布模式，如图1a和图1b所示，但此种排布方式不能检测物体距离，且只能用于接受自然光，在正常光照时拍照记录图像。

[0004] 全像素双核对焦2PD技术的像素阵列排布模式如图1c和图1d所示，此种排布方式也只能用于接受自然光，用于拍照记录图像，但相对PDAF(Phase Detection Auto Focus，相位检测自动对焦)技术方案，可以增加检测物体距离，更加快速的完成对焦动作。

[0005] 其中2PD相位检测技术原理说明如下：由图1c和图1d可见，像素阵列中部分R，G和B子像素被一分为二，根据不同入射方向获取的光能量不一样，从而左边子像素点和右边子像素点即构成一对相位检测对；当左边子像素点和右边子像素点亮度值均达到相对最大峰值时，此刻图像相对最清晰，即为合焦，然后通过算法计算获得物距，从而实现快速对焦。

[0006] 综上所述，CMOS的图像传感器像素阵列排布中无法检测物体距离且只能接受自然光，2PD技术的像素阵列排布中虽然可以检测物体距离，但是仅可接受自然光，因此现有的图像传感器的像素阵列排布模式，存在拍摄场景受限、对焦缓慢，影响用户拍摄体验的问题。

发明内容

[0007] 本发明实施例提供一种图像传感器、移动终端及图像拍摄方法，以解决现有技术中拍摄时存在拍摄场景受限、对焦缓慢，影响用户拍摄体验的问题。

[0008] 为了解决上述问题，本发明实施例是这样实现的：

[0009] 第一方面，本发明实施例提供一种图像传感器，包括：

[0010] 像素阵列，像素阵列包括按照预定方式排布的预设数目个像素单元，像素单元包括第一像素和与第一像素位置相邻的第二像素，第一像素包括红色子像素、绿色子像素和蓝色子像素，第二像素包括红色子像素和蓝色子像素中的至少一种以及绿色子像素和红外子像素，且第一像素和第二像素均为全像素双核对焦像素，第一像素和第二像素中各包括四个全像素双核对焦子像素；

[0011] 其中，红外子像素在第二像素中的位置与红色子像素、绿色子像素、蓝色子像素、第一组合子像素或者第二组合子像素在第一像素中的位置相同，第一组合子像素是位置相邻的1/2红色子像素和1/2绿色子像素的组合，第二组合子像素是位置相邻的1/2绿色子像素和1/2蓝色子像素的组合；或者

[0012] 1/2红外子像素在第二像素中的位置，与1/2红色子像素、1/2绿色子像素或者1/2蓝色子像素在第一像素中的位置相同，且两个相邻第二像素中的1/2红外子像素组合形成一完整的红外子像素。

[0013] 第二方面，本发明实施例提供一种移动终端，包括成像系统以及红外发射模块，成像系统包括上述的图像传感器，还包括：

[0014] 透镜模组；

[0015] 用于驱动透镜模组移动的驱动模块；

[0016] 设置于透镜模组与图像传感器之间的滤波模块；

[0017] 与图像传感器连接的图像数据处理模块；以及

[0018] 与图像数据处理模块连接的显示模块；

[0019] 其中红外发射模块设置于透镜模组的周缘。

[0020] 第三方面，本发明实施例提供一种图像拍摄方法，应用于移动终端，移动终端包括上述的图像传感器，还包括红外发射模块，该方法包括：

[0021] 通过红外发射模块发射红外光；

[0022] 根据待拍摄对象所反射的红外光获取待拍摄对象上各个红外光反射点与移动终端之间的距离；

[0023] 根据待拍摄对象上各个红外光反射点与移动终端之间的距离，对待拍摄对象进行立体信息获取。

[0024] 本发明技术方案，通过采用2PD的RGB子像素与红外子像素结合的像素阵列形成图像传感器，根据图像传感器执行拍摄，可以在拍摄记录图像的基础上，检测待拍摄对象与移动终端之间的距离，实现快速对焦和背景虚化，同时基于红外光可提升图像的暗态成像效果，实现立体拍照的相关应用功能，在保证用户拍摄体验的同时，保证移动终端的功能多样化。附图说明

[0025] 为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

[0026] 图1a表示现有技术常规RGB排布示意图；

[0027] 图1b表示常规像素点的切面图；

[0028] 图1c表示2PD的像素阵列排布图；

[0029] 图1d表示2PD像素切面图；

[0030] 图2a表示本发明实施例像素单元的示意图之一；

[0031] 图2b表示本发明实施例像素单元的示意图之二；

[0032] 图2c表示本发明实施例像素单元的示意图之三；

[0033] 图3a表示本发明实施例像素单元的示意图之四；

[0034] 图3b表示本发明实施例像素单元的示意图之五；

[0035] 图4a表示本发明实施例像素单元的示意图之六；

[0036] 图4b表示本发明实施例像素单元的示意图之七；

[0037] 图5a表示本发明实施例像素单元的示意图之八；

[0038] 图5b表示本发明实施例像素单元的示意图之九；

[0039] 图6a表示本发明实施例像素单元的示意图之十；

[0040] 图6b表示本发明实施例像素单元的示意图之十一；

[0041] 图7表示本发明实施例像素切面图；

[0042] 图8a表示本发明实施例移动终端示意图；

[0043] 图8b表示本发明实施例成像系统示意图；

[0044] 图9表示本发明实施例图像拍摄方法示意图；

[0045] 图10表示本发明实施例移动终端硬件结构示意图。

具体实施方式

[0046] 下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

[0047] 本发明实施例提供一种图像传感器，包括：像素阵列，像素阵列包括按照预定方式排布的预设数目个像素单元，如图2a至2c、图3a至图3b以及图4a至图4b所示，像素单元包括第一像素和与第一像素位置相邻的第二像素，第一像素包括红色子像素、绿色子像素和蓝色子像素，第二像素包括红色子像素和蓝色子像素中的至少一种以及绿色子像素和红外子像素，且第一像素和第二像素均为全像素双核对焦像素，第一像素和第二像素中各包括四个全像素双核对焦子像素；

[0048] 其中，红外子像素在第二像素中的位置与红色子像素、绿色子像素、蓝色子像素、第一组合子像素或者第二组合子像素在第一像素中的位置相同，第一组合子像素是位置相邻的1/2红色子像素和1/2绿色子像素的组合，第二组合子像素是位置相邻的1/2绿色子像素和1/2蓝色子像素的组合；或者

[0049] 1/2红外子像素在第二像素中的位置，与1/2红色子像素、1/2绿色子像素或者1/2蓝色子像素在第一像素中的位置相同，且两个相邻第二像素中的1/2红外子像素组合形成一完整的红外子像素。

[0050] 本发明实施例提供的图像传感器所包含的像素阵列，包含预设数目个像素单元，其中预设数目个像素单元按照预定方式进行排布。预设数目个像素单元均包括第一像素以及第二像素，其中第一像素与第二像素有所区别，第一像素中包括红色子像素(R)、绿色子像素(G)和蓝色子像素(B)，第二像素中包括红色子像素和蓝色子像素中的至少一种，还包括绿色子像素和红外子像素(IR)，通过在第二像素中设置红外子像素，可以在接收红外光的情况下进行图像拍摄，实现暗态成像，保证用户拍摄体验。

[0051] 其中，本发明实施例中的第一像素以及第二像素均为全像素双核对焦(2PD)像素，通过采用2PD像素可以检测物体距离，更加快速的完成对焦动作，这里的第一像素以及第二像素均为2PD像素，也就是第一像素和第二像素中的子像素均为2PD子像素。

[0052] 其中，第一像素中的红色子像素、绿色子像素和蓝色子像素按照一定的方式进行排列，且第一像素中包含四个全像素双核对焦子像素，分别为一个红色子像素、一个蓝色子像素以及两个绿色子像素，在这里为了便于区别将两个绿色子像素分别称为第一绿色子像素和第二绿色子像素，其中第一绿色子像素与第二绿色子像素相同。红色子像素与第一绿色子像素相邻，第二绿色子像素位于红色子像素的下方，蓝色子像素位于第一绿色子像素的下方，且第二绿色子像素与蓝色子像素相邻。

[0053] 第二像素包含四个全像素双核对焦子像素，具体包括红色子像素和蓝色子像素中的至少一种，还包括绿色子像素以及红外子像素，即第二像素中可以包括红色子像素、绿色子像素和红外子像素，可以包括绿色子像素、蓝色子像素以及红外子像素，还可以包括绿色子像素、红色子像素、蓝色子像素以及红外子像素。

[0054] 其中红外子像素在第二像素中的位置可以与第一像素中某一子像素的位置相同，还可以与第一像素中位置相邻的两个1/2不同子像素的位置相同。当然还可以是1/2红外子像素在第二像素中的位置与第一像素中任一1/2子像素的位置相同，此时可由两个相邻的第二像素中的1/2红外子像素组合形成一完整的红外子像素。例如1/2红外子像素在第二像素中的位置与1/2红色子像素在第一像素中的位置相同，另外1/2红外子像素在第二像素中的位置与1/2绿色子像素在第一像素中的位置相同，至此可以通过两个第二像素组合形成完整的红外子像素。

[0055] 本发明实施例，通过在RGB像素阵列排布方式上进行改进，将RGB像素阵列排布方式改为RGB-IR(红外)的像素阵列排布方式，可以使得移动终端在接收红外光的情况下进行图像拍摄，实现暗态成像，保证用户拍摄体验。

[0056] 同时本发明实施例的图像传感器可以实现检测待拍摄对象与移动终端之间的距离，实现快速对焦和背景虚化，通过与红外发射模块配合，可提升图像的成像效果，并实现立体拍照的相关应用功能，在保证用户拍摄体验的同时，增强移动终端的功能性。

[0057] 在本发明实施例中，如图2a至图2c、图3a以及图4a所示，红外子像素在第二像素中的位置与红色子像素、绿色子像素、蓝色子像素、第一组合子像素或者第二组合子像素在第一像素中的位置相同，第一组合子像素是位置相邻的1/2红色子像素和1/2绿色子像素的组合；第二组合子像素是位置相邻的1/2绿色子像素和1/2蓝色子像素的组合。

[0058] 当第二像素中包括蓝色子像素、绿色子像素和红外子像素时，红外子像素替代了第一像素中的红色子像素，此时红外子像素在第二像素中的位置，与红色子像素在第一像素中的位置相同。

[0059] 当第二像素中包括红色子像素、绿色子像素和红外子像素时，红外子像素替代了第一像素中的蓝色子像素，此时红外子像素在第二像素中的位置，与蓝色子像素在第一像素中的位置相同。

[0060] 当第二像素中包括红色子像素、绿色子像素、蓝色子像素和红外子像素时，可以是红外子像素替代了第一像素中的一绿色子像素，此时红外子像素在第二像素中的位置，与绿色子像素在第一像素中的位置相同。

[0061] 当第二像素中包括红色子像素、绿色子像素、蓝色子像素和红外子像素时，还可以是第二像素中包括一个红色子像素、一个绿色子像素、1/2蓝色子像素、1/2绿色子像素以及一个红外子像素，此时红外子像素代替了第一像素中的1/2绿色子像素和1/2蓝色子像素，即红外子像素在第二像素中的位置与位置相邻的1/2绿色子像素和1/2蓝色子像素在第一像素中的位置相同。

[0062] 当第二像素中包括红色子像素、绿色子像素、蓝色子像素和红外子像素时，也可以是第二像素中包括一个蓝色子像素、一个绿色子像素、1/2红色子像素、1/2绿色子像素以及一个红外子像素，此时红外子像素代替了第一像素中的1/2绿色子像素和1/2红色子像素，即红外子像素在第二像素中的位置与位置相邻的1/2绿色子像素和1/2红色子像素在第一像素中的位置相同。

[0063] 在本发明实施例中，当红外子像素在第二像素中的位置，与红色子像素、绿色子像素、蓝色子像素、第一组合子像素或者第二组合子像素在第一像素中的位置相同时，像素单元中包括一个第二像素以及至少一个第一像素。

[0064] 若红外子像素在第二像素中的位置，与第一像素中的红色子像素、绿色子像素、蓝色子像素、第一组合子像素或者第二组合子像素的位置相同时，此时像素单元中第二像素的数量为一个，第一像素的数量可以大于或者等于一个。当像素单元中包括一个第二像素以及一个第一像素时，此时红外子像素在像素单元中的取点密度为1/8。例如，如图5a所示，像素单元中包括一个第一像素以及一个第二像素，其中第二像素中包括一个红色子像素、两个绿色子像素以及一个红外子像素，第一像素中包括一个红色子像素、两个绿色子像素以及一个蓝色子像素，此时红外子像素在像素单元中的占比为1/8，也就是说红外子像素的取点密度为1/8。

[0065] 当像素单元中包括两个第一像素以及一个第二像素，此时红外子像素在像素单元中的密度为1/12。例如，如图5b所示，像素单元中包括两个第一像素以及一个第二像素，其中第二像素中包括一个蓝色子像素、两个绿色子像素以及一个红外子像素，第一像素中包括一个红色子像素、两个绿色子像素以及一个蓝色子像素，此时红外子像素在像素单元中的占比为1/12，也就是说红外子像素的取点密度为1/12。

[0066] 当像素单元中包括三个第一像素以及一个第二像素，此时红外子像素在像素单元中的密度为1/16。例如，如图4a所示，像素单元中包括三个第一像素以及一个第二像素，其中第二像素中包括一个蓝色子像素、一个绿色子像素、1/2红色子像素、1/2绿色子像素以及一个红外子像素，可以在第一像素的基础上取2PD子像素的1/2红色子像素和1/2绿色子像素为红外子像素，第一像素中包括一个红色子像素、两个绿色子像素以及一个蓝色子像素，此时红外子像素在像素单元中的占比为1/16，也就是说红外子像素的取点密度为1/16。

[0067] 上述对应的几种取点方式仅用于举例说明，还可以是其他的取点方式，这里不再一一介绍。其中红外子像素在像素单元中的密度为1/4n，且n为大于或者等于2的整数，且红外子像素点所适用的像素阵列大小不限。

[0068] 在本发明实施例中，如图3b和图4b所示，1/2红外子像素在第二像素中的位置，与1/2红色子像素、1/2绿色子像素或者1/2蓝色子像素在第一像素中的位置相同，且两个相邻第二像素中的1/2红外子像素组合形成一完整的红外子像素。

[0069] 当1/2红外子像素在第二像素中的位置，与1/2红色子像素、1/2绿色子像素或者1/2蓝色子像素在第一像素中的位置相同，且两个相邻第二像素中的1/2红外子像素组合形成一完整的红外子像素时，在像素单元中，第二像素的数量为两个，第一像素的数量大于或者等于零。

[0070] 在第二像素中可以仅包含1/2红外子像素，此时通过两个相邻的第二像素进行组合可以得到一个完整的红外子像素。

[0071] 当第二像素中包含1/2红外子像素时，1/2红外子像素在第二像素中的位置可以与1/2红色子像素在第一像素中的位置相同，还可以与1/2绿色子像素在第一像素中的位置相同，也可以与1/2蓝色子像素在第一像素中的位置相同。

[0072] 当1/2红外子像素在一第二像素中的位置与1/2红色子像素在第一像素中的位置相同时，则在另一第二像素中1/2红外子像素的位置与1/2绿色子像素在第一像素中的位置相同。当1/2红外子像素在一第二像素中的位置与1/2绿色子像素在第一像素中的位置相同时，则在另一第二像素中1/2红外子像素的位置与1/2蓝色子像素或1/2红色子像素在第一像素中的位置相同。

[0073] 相应的，此时在像素单元中，第二像素的数量为两个，第一像素的数量大于或者等于零。

[0074] 像素单元中像素的数量至少为两个，则像素单元中包括两个第二像素以及数量大于或者等于零的第一像素。当像素单元中像素的数量为两个时，包括两个第二像素，此时红外子像素在像素单元中的取点密度为1/8。例如，如图6a所示，像素单元中包括两个第二像素，其中在一第二像素中包括一个红色子像素、一个绿色子像素、一个蓝色子像素、1/2绿色子像素以及1/2红外子像素，在另一第二像素中包括一个红色子像素、两个绿色子像素、1/2蓝色子像素以及1/2红外子像素。此时1/2红外子像素在一第二像素中的位置与1/2绿色子像素在第一像素中的位置相同，在另一第二像素中1/2红外子像素的位置与1/2蓝色子像素在第一像素中的位置相同。红外子像素在像素单元中的占比为1/8，也就是说红外子像素的取点密度为1/8。

[0075] 当像素单元中像素的数量为三个时，包括两个第二像素以及一个第一像素，此时红外子像素在像素单元中的取点密度为1/12。例如，如图6b所示，像素单元中包括两个第二像素以及一个第一像素，其中在一第二像素中包括一个红色子像素、一个绿色子像素、一个蓝色子像素、1/2绿色子像素以及1/2红外子像素，在另一第二像素中包括1/2红色子像素、两个绿色子像素、一个蓝色子像素以及1/2红外子像素，此时1/2红外子像素在一第二像素中的位置与1/2绿色子像素在第一像素中的位置相同，在另一第二像素中1/2红外子像素的位置与1/2红色子像素在第一像素中的位置相同。红外子像素在像素单元中的占比为1/12，也就是说红外子像素的取点密度为1/12。

[0076] 当像素单元中像素的数量为四个时，包括两个第二像素以及两个第一像素，此时红外子像素在像素单元中的取点密度为1/16。例如，如图4b所示，像素单元中包括两个第二像素以及两个第一像素，其中在一第二像素中包括一个红色子像素、一个绿色子像素、一个蓝色子像素、1/2绿色子像素以及1/2红外子像素，在另一第二像素中包括一个蓝色子像素、两个绿色子像素、1/2红色子像素以及1/2红外子像素，此时1/2红外子像素在一第二像素中的位置与1/2绿色子像素在第一像素中的位置相同，在另一第二像素中1/2红外子像素的位置与1/2红色子像素在第一像素中的位置相同。红外子像素在像素单元中的占比为1/16，也就是说红外子像素的取点密度为1/16。

[0077] 像素阵列可以是由1/8密度的RGB+IR像素单元、1/12密度的RGB+IR像素单元或1/16密度的RGB+IR像素单元作为一个像素单位阵列，像素单位阵列再进行周期性阵列排布组成。当然像素阵列还可以是其他形式，这里不再列举。

[0078] 上述仅仅为几种对应的红外子像素的取点实施方式，还可以在此基础上进行变形，或者采用其他的取点方式，即本发明实施例的红外子像素的取点方式不做进一步限制，其对应的多种实现方式这里不再一一阐述。红外子像素在像素单元中的取点位置(第二像素的位置)在本发明实施例中不做具体限制。其中红外子像素在像素单元中的密度为1/4n，且n为大于或者等于2的整数，且红外子像素点所适用的像素阵列大小不限。

[0079] 上述的像素单元形式，可以取2PD子像素的红色、绿色或者蓝色子像素为红外子像素，便于像素单元的形式多样化，还可以取2PD子像素的1/2红色和1/2绿色子像素或者取1/2蓝色和1/2绿色子像素为红外子像素，可以减少RGB处理时IR坏点影响。

[0080] 在本发明实施例中，红色子像素包括依次堆叠设置的半导体层、金属层、光电二极管、红色滤光片以及微镜；绿色子像素包括依次堆叠设置的半导体层、金属层、光电二极管、绿色滤光片以及微镜；蓝色子像素包括依次堆叠设置的半导体层、金属层、光电二极管、蓝色滤光片以及微镜；红外子像素包括依次堆叠设置的半导体层、金属层、光电二极管、红外滤光片以及微镜。

[0081] 红色子像素所包含的半导体层、金属层、光电二极管、红色滤光片以及微镜，由下至上依次排列。相应的绿色子像素所包含的半导体层、金属层、光电二极管、绿色滤光片以及微镜，由下至上依次排列。蓝色子像素所包含的半导体层、金属层、光电二极管、蓝色滤光片以及微镜，由下至上依次排列。红外子像素所包含的半导体层、金属层、光电二极管、红外滤光片以及微镜，由下至上依次排列。这里的半导体层可以为硅基板，但并不局限于此。红色、绿色、蓝色以及红外子像素的结构可参见图7所示，图7中虽然只示出了蓝色以及红外子像素，但在此基础上可以将获知红绿子像素的结构。可将蓝色滤光片替换为红色或者绿色滤光片，即可获得红色子像素或绿子像素的结构。

[0082] 红色、绿色以及蓝色子像素用于获取合成图像的像素的色彩信息，其阻挡红外线的进入；例如，仅使波长在380～700nm的可见光进入，可在高照度下直接生成色彩完整逼真的图像。红外子像素感光带宽为750～1100nm，红外滤光区可用于使红外波段通过，可提升暗态成像效果，实现红外测距功能。

[0083] 由以上说明可见，RGB子像素点是对应于每种RGB颜色的波长光的光接收元件，IR子像素点是对应红外光的光接收元件。

[0084] 在本发明实施例中，图像传感器为互补金属氧化物半导体CMOS图像传感器、电荷耦合元件CCD图像传感器或量子薄膜图像传感器。

[0085] 本发明RGB-IR的像素阵列排布方式，适用的图像传感器类型不限，可以是基于CMOS的图像传感器，可以是基于CCD(Charge-coupled Device，电荷耦合元件)的图像传感器，也可以是基于量子薄膜的图像传感器，当然还可以是其他类型的图像传感器。且本发明实施例的图像传感器可适用于任何包含摄像头模组的电子产品中。

[0086] 本发明实施例还提供一种移动终端，如图8a和图8b所示，移动终端1包括成像系统2以及红外发射模块3，成像系统2包括上述的图像传感器21，还包括：

[0087] 透镜模组22；用于驱动透镜模组22移动的驱动模块23；设置于透镜模组22与图像传感器21之间的滤波模块24；与图像传感器21连接的图像数据处理模块25；以及与图像数据处理模块25连接的显示模块26；其中红外发射模块3设置于透镜模组22的周缘。

[0088] 本发明实施例的移动终端1包括成像系统2，还包括红外发射模块3，其中成像系统2包括上述的图像传感器21，成像系统2还包括用于对光线聚焦的透镜模组22，透镜模组22与驱动模块23连接，驱动模块23用于随着待拍摄对象的远近，从而进行调整透镜模组22的位置。

[0089] 在透镜模组22与图像传感器21之间设置有滤波模块24，其中在光线通过透镜模组22聚焦，经过滤波模块24后，可以聚焦在图像传感器21的像素阵列上。图像传感器21与图像数据处理模块25连接，图像数据处理模块25与显示模块26连接。在光线聚焦在图像传感器
21的像素阵列上之后，图像传感器21进行光电转换后，将数据传输给图像数据处理模块25，图像数据处理模块25对数据进行处理后在显示模块26上以图片的形式呈现。

[0090] 其中在驱动模块23调整透镜模组22的位置之后，可以利用图像传感器21中的2PD像素获取相位差，从而获取物体与成像面距离，进而实现快速对焦。

[0091] 另外，本发明中基于2PD图像传感器的RGB+IR像素阵列排布方式，可以配合红外发射模块3实现立体相关功能，例如：人脸识别解锁，安全支付，立体成像等终端应用，在保证成像的基础上，提升移动终端的功能性。

[0092] 本发明实施例中的滤波模块24可通过380nm至1100nm的光波长。此时在光线通过透镜模组22聚焦后，可通过滤波模块24进行滤波，其中滤波模块24可用于自然光和红外光的通过，可用于保证成像系统2的成像效果。

[0093] 其中，移动终端上的红外发射模块3设置于透镜模组22的周缘。红外发射模块3发出红外线，红外线在遇到障碍物后会发生反射；当成像系统2捕捉到反射回来的红外光线后，经过红外子像素进行光电转换，可获取红外线从发射到接收到红外线的时间差，由于光的传播速度固定，从而可以计算出障碍物距离移动终端的距离，最终可获取障碍物上每个极小单位到移动终端的距离，实现立体成像记录功能。当然还可以通过获取红外光相位差的方式，获取障碍物上各个红外光反射点与移动终端之间的距离。

[0094] 本发明实施例的移动终端，通过对图像传感器的像素阵列排布方式进行改进，将RGB像素阵列排布方式改进为2PD的RGB-IR的像素阵列排布方式，可以在接收红外光拍摄记录图像的基础上，检测待拍摄对象与移动终端之间的距离，实现快速对焦和背景虚化，提升图像的成像效果，并实现立体拍照的相关应用功能以及暗态成像，在保证用户拍摄体验的同时，保证移动终端的功能多样化。

[0095] 本发明实施例还提供一种图像拍摄方法，应用于移动终端，移动终端包括上述的图像传感器，还包括红外发射模块，如图9所示，该方法包括：

[0096] 步骤901、通过红外发射模块发射红外光。

[0097] 移动终端上的红外发射模块可以发出红外线，红外线在遇到待拍摄对象后会发生反射，其反射的红外光会被移动终端的成像系统所接收。其中移动终端的图像传感器形成RGB-IR的像素阵列，因此可通过红外子像素进行光电转换。

[0098] 步骤902、根据待拍摄对象所反射的红外光获取待拍摄对象上各个红外光反射点与移动终端之间的距离。

[0099] 在获取待拍摄对象与移动终端之间的距离时，实际为获取待拍摄对象与成像面之间的距离，获取待拍摄对象上各个红外光反射点与移动终端之间的距离的过程为：通过包含第二像素的像素阵列接收待拍摄对象上各个红外光反射点所反射的红外光；根据发送与接收红外光的时间差以及红外光的传播速度或者通过获取红外光的相位差，获取待拍摄对象上各个红外光反射点与移动终端之间的距离。当捕捉到反射回来的红外光线后，经过红外子像素进行光电转换，可获取红外线从发射到接收到红外线的时间差，由于光的传播速度固定，从而可以根据时间差与传播速度乘积的1/2计算出障碍物距离移动终端的距离。其中移动终端接收到各个红外光反射点反射红外光的时间有所区别，因此针对每一个红外光反射点可以对应计算一距离，进而可以获得各个红外光反射点与移动终端之间的距离。还可以通过获取红外光的相位差获取各个红外光反射点与移动终端之间的距离，具体参见TOF(Time of Flight，飞行时间)技术，在此不再详细赘述。

[0100] 其中本发明实施例的图像传感器的像素阵列包括按照预定方式排布的预设数目个像素单元，像素单元包括第一像素和第二像素，第一像素包括红色子像素、绿色子像素和蓝色子像素，第二像素包括红色子像素和蓝色子像素中的至少一种以及绿色子像素和红外子像素，且第一像素和第二像素均为全像素双核对焦像素，第一像素和第二像素中各包括四个全像素双核对焦子像素；其中，红外子像素在第二像素中的位置与红色子像素、绿色子像素、蓝色子像素、第一组合子像素或者第二组合子像素在第一像素中的位置相同，第一组合子像素是位置相邻的1/2红色子像素和1/2绿色子像素的组合，第二组合子像素是位置相邻的1/2绿色子像素和1/2蓝色子像素的组合；或者1/2红外子像素在第二像素中的位置，与1/2红色子像素、1/2绿色子像素或者1/2蓝色子像素在第一像素中的位置相同，且两个相邻第二像素中的1/2红外子像素组合形成一完整的红外子像素。

[0101] 步骤903、根据待拍摄对象上各个红外光反射点与移动终端之间的距离，对待拍摄对象进行立体信息获取。

[0102] 在获取待拍摄对象上各个红外光反射点与移动终端之间的距离时，具体为获取待拍摄对象上每个极小单位到移动终端的距离，然后执行对待拍摄对象拍摄的流程，实现立体成像记录功能。

[0103] 本发明实施例的拍摄方法，可以通过对图像传感器的像素阵列排布方式进行改进，将RGB像素阵列排布方式改进为2PD的RGB-IR的像素阵列排布方式，可以在接收红外光拍摄记录图像的基础上，检测待拍摄对象与移动终端之间的距离，实现快速对焦和背景虚化，提升图像的成像效果，并实现立体拍照的相关应用功能以及暗态成像，在保证用户拍摄体验的同时，保证移动终端的功能多样化。

[0104] 图10为实现本发明各个实施例的一种移动终端的硬件结构示意图，该移动终端1000包括但不限于：射频单元1001、网络模块1002、音频输出单元1003、输入单元1004、传感器1005、显示单元1006、用户输入单元1007、接口单元1008、存储器1009、处理器1010、以及电源1011等部件。

[0105] 移动终端1000，还包括成像系统以及红外发射模块，成像系统包括图像传感器，透镜模组；用于驱动透镜模组移动的驱动模块；设置于透镜模组与图像传感器之间的滤波模块；与图像传感器连接的图像数据处理模块；以及与图像数据处理模块连接的显示模块。

[0106] 其中，滤波模块可通过380nm至1100nm的光波长，红外发射模块设置于透镜模组的周缘。

[0107] 其中，图像传感器包括：

[0108] 像素阵列，像素阵列包括按照预定方式排布的预设数目个像素单元，像素单元包括第一像素和与第一像素位置相邻的第二像素，第一像素包括红色子像素、绿色子像素和蓝色子像素，第二像素包括红色子像素和蓝色子像素中的至少一种以及绿色子像素和红外子像素，且第一像素和第二像素均为全像素双核对焦像素，第一像素和第二像素中各包括四个全像素双核对焦子像素；

[0109] 其中，红外子像素在第二像素中的位置与红色子像素、绿色子像素、蓝色子像素、第一组合子像素或者第二组合子像素在第一像素中的位置相同，第一组合子像素是位置相邻的1/2红色子像素和1/2绿色子像素的组合，第二组合子像素是位置相邻的1/2绿色子像素和1/2蓝色子像素的组合；或者

[0110] 1/2红外子像素在第二像素中的位置，与1/2红色子像素、1/2绿色子像素或者1/2蓝色子像素在第一像素中的位置相同，且两个相邻第二像素中的1/2红外子像素组合形成一完整的红外子像素。

[0111] 其中，当红外子像素在第二像素中的位置，与红色子像素、绿色子像素、蓝色子像素、第一组合子像素或者第二组合子像素在第一像素中的位置相同时，像素单元中包括一个第二像素以及至少一个第一像素。

[0112] 其中，当1/2红外子像素在第二像素中的位置，与1/2红色子像素、1/2绿色子像素或者1/2蓝色子像素在第一像素中的位置相同，且两个相邻第二像素中的1/2红外子像素组合形成一完整的红外子像素时，在像素单元中，第二像素的数量为两个，第一像素的数量大于或者等于零。

[0113] 其中，红色子像素包括依次堆叠设置的半导体层、金属层、光电二极管、红色滤光片以及微镜；绿色子像素包括依次堆叠设置的半导体层、金属层、光电二极管、绿色滤光片以及微镜；蓝色子像素包括依次堆叠设置的半导体层、金属层、光电二极管、蓝色滤光片以及微镜；红外子像素包括依次堆叠设置的半导体层、金属层、光电二极管、红外滤光片以及微镜。

[0114] 其中，图像传感器为互补金属氧化物半导体CMOS图像传感器、电荷耦合元件CCD图像传感器或量子薄膜图像传感器。

[0115] 本领域技术人员可以理解，图10中示出的移动终端结构并不构成对移动终端的限定，移动终端可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本发明实施例中，移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。

[0116] 其中，处理器1010用于：通过红外发射模块发射红外光；根据待拍摄对象所反射的红外光获取待拍摄对象上各个红外光反射点与移动终端之间的距离；根据待拍摄对象上各个红外光反射点与移动终端之间的距离，控制成像系统对待拍摄对象进行立体信息获取。

[0117] 这样，通过对图像传感器的像素阵列排布方式进行改进，将RGB像素阵列排布方式改进为2PD的RGB-IR的像素阵列排布方式，可以在接收红外光拍摄记录图像的基础上，检测待拍摄对象与移动终端之间的距离，实现快速对焦和背景虚化，提升图像的成像效果，并实现立体拍照的相关应用功能以及暗态成像，在保证用户拍摄体验的同时，保证移动终端的功能多样化。

[0118] 应理解的是，本发明实施例中，射频单元1001可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器1010处理；另外，将上行的数据发送给基站。通常，射频单元1001包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元1001还可以通过无线通信系统与网络和其他设备通信。

[0119] 移动终端通过网络模块1002为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。

[0120] 音频输出单元1003可以将射频单元1001或网络模块1002接收的或者在存储器1009中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元1003还可以提供与移动终端1000执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元1003包括扬声器、蜂鸣器以及受话器等。

[0121] 输入单元1004用于接收音频或视频信号。输入单元1004可以包括图形处理器(Graphics Processing Unit，GPU)10041和麦克风10042，图形处理器10041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元1006上，这里的显示单元即为上述的显示模块。经图形处理器10041处理后的图像帧可以存储在存储器1009(或其它存储介质)中或者经由射频单元1001或网络模块1002进行发送。其中图形处理器10041即为上述的图像数据处理模块。麦克风10042可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元1001发送到移动通信基站的格式输出。

[0122] 移动终端1000还包括至少一种传感器1005，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板10061的亮度，接近传感器可在移动终端1000移动到耳边时，关闭显示面板10061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；传感器1005还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。

[0123] 显示单元1006用于显示由用户输入的信息或提供给用户的信息。显示单元1006可包括显示面板10061，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode，OLED)等形式来配置显示面板10061。

[0124] 用户输入单元1007可用于接收输入的数字或字符信息，以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元1007包括触控面板10071以及其他输入设备10072。触控面板10071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板10071上或在触控面板10071附近的操作)。触控面板10071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；
触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器1010，接收处理器1010发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板10071。除了触控面板10071，用户输入单元1007还可以包括其他输入设备10072。具体地，其他输入设备10072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。

[0125] 进一步的，触控面板10071可覆盖在显示面板10061上，当触控面板10071检测到在其上或附近的触摸操作后，传送给处理器1010以确定触摸事件的类型，随后处理器1010根据触摸事件的类型在显示面板10061上提供相应的视觉输出。虽然在图10中，触控面板10071与显示面板10061是作为两个独立的部件来实现移动终端的输入和输出功能，但是在某些实施例中，可以将触控面板10071与显示面板10061集成而实现移动终端的输入和输出功能，具体此处不做限定。

[0126] 接口单元1008为外部装置与移动终端1000连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元1008可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到移动终端1000内的一个或多个元件或者可以用于在移动终端1000和外部装置之间传输数据。

[0127] 存储器1009可用于存储软件程序以及各种数据。存储器1009可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器1009可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

[0128] 处理器1010是移动终端的控制中心，利用各种接口和线路连接整个移动终端的各个部分，通过运行或执行存储在存储器1009内的软件程序和/或模块，以及调用存储在存储器1009内的数据，执行移动终端的各种功能和处理数据，从而对移动终端进行整体监控。处理器1010可包括一个或多个处理单元；优选的，处理器1010可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器1010中。

[0129] 移动终端1000还可以包括给各个部件供电的电源1011(比如电池)，优选的，电源1011可以通过电源管理系统与处理器1010逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

[0130] 另外，移动终端1000包括一些未示出的功能模块，在此不再赘述。

[0131] 需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

[0132] 通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

[0133] 上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本发明的保护之内。

标题	发布/更新时间	阅读量
可调整焦距的透镜结构及屏下指纹传感器结构	2020-05-08	507
一种恢复小凹光学系统所成像的黑边信息的系统	2020-05-08	127
阵列基板及显示面板	2020-05-08	77
具有偏移消除的读出放大器和存储器装置	2020-05-08	411
非相干扩频数字收发信机瞬时测频与解调方法	2020-05-11	479
书写装置及控制系统	2020-05-12	707
波导集成雪崩光电二极管	2020-05-12	228
锁存电路	2020-05-08	852
一种电流源型四电平直流变换器及其控制方法	2020-05-08	779
光学图像采集单元、光学图像采集系统和电子设备	2020-05-12	698

一种图像传感器、移动终端及图像拍摄方法

一种图像传感器、移动终端及图像拍摄方法

技术领域

背景技术

发明内容

具体实施方式

该功能需要专业版企业版VIP权限，您可以：