双模态仿生视觉传感器
阅读：308发布：2020-05-08
专利汇可以提供双模态仿生视觉传感器专利检索，专利查询，专利分析的服务。并且本 发明 实施例 提供了一种双模态仿生视觉 传感器 ，通过第一类 电流 模式有源 像素 传感器 电路 模拟兴奋型视杆细胞的作用，实现对目标光 信号 中的光强梯度信息的 感知 作用，进而提高仿生视觉传感器图像的动态范围，提高拍摄速度。而且，为每个非目标第一类感光器件引入一个第一类控制 开关 ，可以对得到的光强梯度信息进行控制，实现对仿生视觉传感器图像的动态范围的调整，进而实现对拍摄速度的调整，实现了可重配的效果。通过 电压 模式有源像素传感器模拟视锥细胞的作用，可以输出表征目标 光信号 中的光强信息的目标电压信号，实现对目标光信号中的光强信息的感知作用，得到的目标电压信号表征光强信息的 精度 更高，可以保证得到的图像 质量 。，下面是双模态仿生视觉传感器专利的具体信息内容。
1.一种双模态仿生视觉传感器，其特征在于，包括：第一类电流模式有源像素传感器电路和电压模式有源像素传感器电路；
所述第一类电流模式有源像素传感器电路包括一个目标第一类感光器件；所述目标第一类感光器件用于获取目标光信号，并将所述目标光信号转换为第一类电流信号，所述第一类电流模式有源像素传感器电路用于基于所述第一类电流信号与所述目标第一类感光器件周围第一预设数量个非目标第一类感光器件转换得到的第二类电流信号之和的差值，输出表征所述目标光信号中的光强梯度信息的指定数字信号；
所述电压模式有源像素传感器电路包括第二类感光器件，所述第二类感光器件用于获取所述目标光信号，从所述目标光信号中提取指定频段的光信号，并将所述指定频段的光信号转换为第三类电流信号，所述电压模式有源像素传感器电路用于基于所述第三类电流信号，输出表征所述目标光信号中的光强信息的目标电压信号；
其中，每个非目标第一类感光器件分别与一个第一类控制开关串联。
2.根据权利要求1所述的双模态仿生视觉传感器，其特征在于，所述第一类电流模式有源像素传感器电路还包括：第一电流放大器、比较器、加法器和数模转换器；
所述目标第一类感光器件与所述第一电流放大器相连，所述第一电流放大器与所述比较器的一个输入端相连；
所述加法器的输入端分别与所述第一类控制开关连接，所述加法器的输出端与所述比较器的另一个输入端相连；
所述比较器的输出端与所述数模转换器相连，所述数模转换器将输入的指定数字信号转换为指定模拟信号，并将所述指定模拟信号输出至所述第一电流放大器或者所述加法器，直至所述比较器的输出端输出事件脉冲信号，所述第一类电流模式有源像素传感器电路输出所述指定数字信号，所述指定数字信号用于表征所述目标光信号中的光强梯度信息。
3.根据权利要求2所述的双模态仿生视觉传感器，其特征在于，所述第一类电流模式有源像素传感器电路还包括：三态门电路；
所述三态门电路分别与所述比较器的输出端以及所述数模转换器的输入端连接；
所述三态门电路用于在所述比较器的输出端输出所述事件脉冲信号时，输出所述指定数字信号。
4.根据权利要求1所述的双模态仿生视觉传感器，其特征在于，所述电压模式有源像素传感器电路具体包括：所述目标第一类感光器件周围的第二预设数量个所述第二类感光器件，每个所述第二类感光器件均分别与一个第二类控制开关串联，同一时刻仅存在一个第二类控制开关处于导通状态；
所述电压模式有源像素传感器电路还包括：电流积分器、快门以及模数转换器，每个所述第二类感光器件以及串联的第二类控制开关构成器件支路，所有器件支路并联连接且共用所述电流积分器、所述快门以及所述模数转换器；
所述电流积分器用于获取所述电压模式有源像素传感器电路中目标电容的电压模拟信号；所述快门用于控制所述电流积分器的积分时间；所述模数转换器用于将所述目标电容的电压模拟信号转换为所述目标电压信号。
5.根据权利要求4所述的双模态仿生视觉传感器，其特征在于，还包括：第二类电流模式有源像素传感器电路；
所述第二类电流模式有源像素传感器电路包括一个所述非目标第一类感光器件和所述第二预设数量个电流镜；
每个电流镜分别与所述非目标第一类感光器件周围的一个所述目标第一类感光器件串联。
6.根据权利要求1所述的双模态仿生视觉传感器，其特征在于，所述双模态仿生视觉传感器的像素阵列由所述目标第一类感光器件、所述非目标第一类感光器件以及所述第二类感光器件排列形成；
所述像素阵列的每一行中，所述第二类感光器件与所述目标第一类感光器件相间排列，或者所述第二类感光器件与所述非目标第一类感光器件相间排列。
7.根据权利要求1所述的双模态仿生视觉传感器，其特征在于，所述第二类感光器件具体包括滤光器和光电二极管；
所述滤光器用于获取所述目标光信号，从所述目标光信号中提取指定频段的光信号；
所述光电二极管用于将所述指定频段的光信号转换为所述第三类电流信号。
8.根据权利要求1所述的双模态仿生视觉传感器，其特征在于，所述第一类电流模式有源像素传感器电路还包括：第二电流放大器；
所述第二电流放大器连接在所述目标第二类感光器件与所述第一电流放大器之间。
9.根据权利要求1-8中任一项所述的双模态仿生视觉传感器，其特征在于，所述目标电压信号和所述指定数字信号共同形成图像。
10.根据权利要求1-8中任一项所述的双模态仿生视觉传感器，其特征在于，还包括：两个存储单元；
所述两个存储单元分别用于存储所述目标电压信号以及所述指定数字信号。
双模态仿生视觉传感器
技术领域
背景技术
[0003] 仿生视觉传感器主要是对人眼视网膜的模态进行仿真，人眼视网膜主要包括两种视觉感知细胞，即视锥细胞和视杆细胞，分别对应两种不同的模态。其中，视锥细胞的模态主要是对绝对光强信息与颜色信息敏感，具有很高的图像还原精度，但是还原速度较慢；与视锥细胞的模态相反，视杆细胞主要是对光强信息的变化量进行感知，具有感知速度较快且感知的动态范围较大，但是其无法感知绝对光强信息与颜色信息。
[0004] 但是，现有技术中存在的仿生视觉传感器均只能对人眼视网膜的其中一种模态进行仿真，形成单一的感知模式，进而只能对某一类信息进行感知。如传统相机，类似于视锥细胞，主要对颜色信息进行感知。如动态视觉传感器(Dynamic Vision Sensor，DVS)，类似于视杆细胞，主要对光强信息的变化量进行感知。而单一模态的视觉传感器应用场景有限。例如，对于类似于视锥细胞的仿生视觉传感器，由于其拍摄得到的是绝对光强信息而非光强信息的变化量，虽然在家用娱乐电子设备中应用非常广泛，但在工业控制领域，往往面临速度不够动态范围太小等问题，因而很难应用。对于类似于视杆细胞的仿生视觉传感器，虽然感知速度很快，但是由于只对运动目标敏感，导致难以拍摄到图像，或者拍摄到的图像质量较差，难以满足娱乐电子设备的需求。而且由于仿生视觉传感器只包含单一的感知模式，在这种感知模式失效时仿生视觉传感器则失效，这对于对稳定性有高要求的无人驾驶、无人机等机器人有很大的局限。另外，目前评价仿生视觉传感器性能的主要指标有图像质量，动态范围与拍摄速度。由上述内容可知，在传统的仿生视觉传感器的框架下，这三个指标往往互斥：如当拍摄速度提高时，仿生视觉传感器的动态范围就会降低；当图像质量提高时拍摄速度一般就会降低，很难同时兼顾。
[0005] 因此，现急需提供一种双模态仿生视觉传感器。
发明内容
[0006] 为克服上述问题或者至少部分地解决上述问题，本发明实施例提供了一种双模态仿生视觉传感器。
[0008] 所述第一类电流模式有源像素传感器电路包括一个目标第一类感光器件；所述目标第一类感光器件用于获取目标光信号，并将所述目标光信号转换为第一类电流信号，所述第一类电流模式有源像素传感器电路用于基于所述第一类电流信号与所述目标第一类感光器件周围第一预设数量个非目标第一类感光器件转换得到的第二类电流信号之和的差值，输出表征所述目标光信号中的光强梯度信息的指定数字信号；
[0009] 所述电压模式有源像素传感器电路包括第二类感光器件，所述第二类感光器件用于获取所述目标光信号，从所述目标光信号中提取指定频段的光信号，并将所述指定频段的光信号转换为第三类电流信号，所述电压模式有源像素传感器电路用于基于所述第三类电流信号，输出表征所述目标光信号中的光强信息的目标电压信号；
[0012] 所述目标第一类感光器件与所述第一电流放大器相连，所述第一电流放大器与所述比较器的一个输入端相连；
[0013] 所述加法器的输入端分别与所述第一类控制开关连接，所述加法器的输出端与所述比较器的另一个输入端相连；
[0014] 所述比较器的输出端与所述数模转换器相连，所述数模转换器将输入的指定数字信号转换为指定模拟信号，并将所述指定模拟信号输出至所述第一电流放大器或者所述加法器，直至所述比较器的输出端输出事件脉冲信号，所述第一类电流模式有源像素传感器电路输出所述指定数字信号，所述指定数字信号用于表征所述目标光信号中的光强梯度信息。
[0015] 优选地，所述第一类电流模式有源像素传感器电路还包括：三态门电路；
[0016] 所述三态门电路分别与所述比较器的输出端以及所述数模转换器的输入端连接；
[0017] 所述三态门电路用于在所述比较器的输出端输出所述事件脉冲信号时，输出所述指定数字信号。
[0018] 优选地，所述电压模式有源像素传感器电路具体包括：所述目标第一类感光器件周围的第二预设数量个所述第二类感光器件，每个所述第二类感光器件均分别与一个第二类控制开关串联，同一时刻仅存在一个第二类控制开关处于导通状态；
[0019] 所述电压模式有源像素传感器电路还包括：电流积分器、快门以及模数转换器，每个所述第二类感光器件以及串联的第二类控制开关构成器件支路，所有器件支路并联连接且共用所述电流积分器、所述快门以及所述模数转换器；
[0020] 所述电流积分器用于获取所述电压模式有源像素传感器电路中目标电容的电压模拟信号；所述快门用于控制所述电流积分器的积分时间；所述模数转换器用于将所述目标电容的电压模拟信号转换为所述目标电压信号。
[0021] 优选地，所述的双模态仿生视觉传感器，还包括：第二类电流模式有源像素传感器电路；
[0022] 所述第二类电流模式有源像素传感器电路包括一个所述非目标第一类感光器件和所述第二预设数量个电流镜；
[0023] 每个电流镜分别与所述非目标第一类感光器件周围的一个所述目标第一类感光器件串联。
[0024] 优选地，所述双模态仿生视觉传感器的像素阵列由所述目标第一类感光器件、所述非目标第一类感光器件以及所述第二类感光器件排列形成；
[0025] 所述像素阵列的每一行中，所述第二类感光器件与所述目标第一类感光器件相间排列，或者所述第二类感光器件与所述非目标第一类感光器件相间排列。
[0028] 优选地，所述第一类电流模式有源像素传感器电路还包括：第二电流放大器；
[0029] 所述第二电流放大器连接在所述目标第二类感光器件与所述第一电流放大器之间。
[0030] 优选地，所述目标电压信号和所述指定数字信号共同形成图像。
[0031] 优选地，所述的双模态仿生视觉传感器，还包括：两个存储单元；所述两个存储单元分别用于存储所述目标电压信号以及所述指定数字信号。
[0032] 本发明实施例提供的一种双模态仿生视觉传感器，一方面，通过第一类电流模式有源像素传感器电路模拟兴奋型视杆细胞的作用，实现对目标光信号中的光强梯度信息的感知作用，进而提高仿生视觉传感器图像的动态范围，提高拍摄速度。而且，为每个非目标第一类感光器件引入一个第一类控制开关，可以对得到的光强梯度信息进行控制，实现对仿生视觉传感器图像的动态范围的调整，进而实现对拍摄速度的调整，实现了可重配的效果。另一方面，通过电压模式有源像素传感器模拟视锥细胞的作用，可以输出表征目标光信号中的光强信息的目标电压信号，实现对目标光信号中的光强信息的感知作用，得到的目标电压信号表征光强信息的精度更高，可以得到更高质量的图像，即图像具有更高的图像信噪比。附图说明
[0033] 为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0034] 图1为本发明实施例提供的一种双模态仿生视觉传感器的结构示意图；
[0035] 图2为本发明实施例提供的一种双模态仿生视觉传感器中第一类电流模式有源像素传感器电路的结构示意图；
[0036] 图3为本发明实施例提供的一种双模态仿生视觉传感器中第一类电流模式有源像素传感器电路中输入至数模转换器的指定数字信号的变化形式示意图；
[0037] 图4为本发明实施例提供的一种双模态仿生视觉传感器中第一类电流模式有源像素传感器电路的结构示意图；
[0038] 图5为本发明实施例提供的一种双模态仿生视觉传感器中第一类电流模式有源像素传感器电路的具体结构示意图；
[0039] 图6为本发明实施例提供的一种双模态仿生视觉传感器中电压模式有源像素传感器的结构示意图；
[0040] 图7为本发明实施例提供的一种双模态仿生视觉传感器中电压模式有源像素传感器的具体结构示意图；
[0041] 图8为本发明实施例提供的一种双模态仿生视觉传感器中第二类电流模式有源像素传感器电路的具体结构示意图；
[0042] 图9为本发明实施例提供的一种双模态仿生视觉传感器中像素阵列的排布方式结构示意图；
[0043] 图10为本发明实施例提供的一种双模态仿生视觉传感器中像素阵列的排布方式结构示意图；
[0044] 图11为本发明实施例提供的一种双模态仿生视觉传感器最终输出的图像示意图。
具体实施方式
[0045] 为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
[0046] 在本发明实施例的描述中，需要说明的是，术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明实施例和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明实施例的限制。此外，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性。
[0047] 在本发明实施例的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明实施例中的具体含义。
[0048] 本发明实施例提供了一种双模态仿生视觉传感器，包括：第一类电流模式有源像素传感器电路和电压模式有源像素传感器电路；
[0049] 所述第一类电流模式有源像素传感器电路包括一个目标第一类感光器件；所述目标第一类感光器件用于获取目标光信号，并将所述目标光信号转换为第一类电流信号，所述第一类电流模式有源像素传感器电路用于基于所述第一类电流信号与所述目标第一类感光器件周围第一预设数量个非目标第一类感光器件转换得到的第二类电流信号之和的差值，输出表征所述目标光信号中的光强梯度信息的指定数字信号；
[0050] 所述电压模式有源像素传感器电路包括第二类感光器件，所述第二类感光器件用于获取所述目标光信号，从所述目标光信号中提取指定频段的光信号，并将所述指定频段的光信号转换为第三类电流信号，所述电压模式有源像素传感器电路用于基于所述第三类电流信号，输出表征所述目标光信号中的光强信息的目标电压信号；
[0051] 其中，每个非目标第一类感光器件分别与一个第一类控制开关串联。
[0052] 具体地，本发明实施例中提供了一种双模态仿生视觉传感器，其像素阵列由感光器件构成，感光器件分别由控制电路进行控制。如图1所示，控制电路包括电流模式有源像素传感器电路1和电压模式有源像素传感器电路2。仿生视觉传感器中的感光器件可以根据对不同类别的光进行感应分为第一类感光器件和第二类感光器件，第一类感光器件用于直接对目标光信号进行感应，第二类感光器件用于对目标光信号中的彩色分量进行感应。本发明实施例中，将目标光信号中的彩色分量记为指定频段的光信号，即第一类感光器件用于获取目标光信号，并将目标光信号转换为电流信号，第二类感光器件用于获取目标光信号，从所述目标光信号中提取指定频段的光信号，并将指定频段的光信号转换为电流信号。
[0053] 其中，目标光信号是指目标物体表面反射的光信号，目标光信号可以直接照射在第一类感光器件或第二类感光器件上，也可以是通过准直透镜照射在第一类感光器件或第二类感光器件上，还可以是透过覆盖物照射在第一类感光器件或第二类感光器件上。目标光信号的波段可以是可见光波段，即目标光信号可以为可见光信号。目标物体是指需要人眼观察的物体，可以是实物，也可以是图像，或者其他形式，本发明中不对目标物体的具体形态进行限定。
[0054] 第一类感光器件和第二类感光器件的数量可以根据需要进行设定。第一类感光器件及其控制电路可以模拟视杆细胞，第二类感光器件及其控制电路可以模拟视锥细胞。第一类感光器件具体可以包括目标第一类感光器件和除目标第一类感光器件外的非目标第一类感光器件，目标第一类感光器件及其控制电路可以模拟兴奋型视杆细胞，非目标第一类感光器件及其控制电路可以模拟抑制型视杆细胞。本发明实施例中，为区分第一类感光器件、第二类感光器件转换得到的电流信号，将目标第一类感光器件转换得到的电流信号记为第一类电流信号，将非目标第一类感光器件转换得到的电流信号记为第二类电流信号，将第二类感光器件转换得到的电流信号记为第三类电路信号。
[0055] 双模态仿生视觉传感器中第一类感光器件由电流模式有源像素传感器电路进行控制，电流模式有源像素传感器电路的数量可以根据目标第一类感光器件的数量确定。本发明实施例中，为区分目标第一类感光器件和非目标第一类感光器件的控制电路，将目标第一类感光器件的控制电路记为第一类电流模式有源像素传感器电路，将非目标第一类感光器件的控制电路记为第二类电流模式有源像素传感器电路。每个目标第一类感光器件对应一个第一类电流模式有源像素传感器电路，每个非目标第一类感光器件对应一个第二类电流模式有源像素传感器电路。第二类感光器件由电压模式有源像素传感器电路进行控制，电压模式有源像素传感器电路的数量可以小于等于第二类感光器件的数量，具体根据第二类感光器件的数量以及复用情况确定，本发明实施例中对此不作具体限定。
[0056] 电流模式有源像素传感器电路是指工作模式为电流模式的有源像素传感器(Active Pixel Sensor，APS)电路，也即在其中的目标第一类感光器件在转换得到第一类电流信号后，并不需要直接对第一类电流信号进行积分，而是根据第一类电流信号与目标第一类感光器件周围预设数量个非目标第一类感光器件转换得到的第二类电流信号之和的差值，输出表征目标光信号中的光强梯度信息的指定数字信号。其中，每个非目标第一类感光器件分别与一个第一类控制开关串联。第一类控制开关具体可以是MOS管，所有第一类控制开关可以同时导通，也可以同时断开，还可以部分导通部分断开，具体可以根据需要进行设置，本发明实施例中对此不作具体限定。
[0057] 第一类控制开关的导通与关闭可以根据需要进行设置，因此第一类控制开关为可配置的第一类控制开关。由于第一类控制开关实现的是控制目标第一类感光器件周围的非目标第一类感光器件是否有效，可以理解为第一类控制开关可以作为参数可配的1bit卷积核对第一类感光器件转换得到的电流信号进行卷积运算，完成速度很高，可以完成像素内的1bit卷积运算，实现高速的特征提取。
[0058] 电压模式有源像素传感器电路是指工作模式为电压模式的APS电路，也即在其中的第二类感光器件转换得到第三类电流信号后，需要对第三类电流信号进行积分，得到目标电压信号，通过目标电压信号表征目标光信号中的光强信息，这种光强信息是一种绝对光强信息，其中还包含有颜色信息。
[0059] 本发明实施例中提供了一种双模态仿生视觉传感器，一方面，通过第一类电流模式有源像素传感器电路模拟兴奋型视杆细胞的作用，实现对目标光信号中的光强梯度信息的感知作用，进而提高仿生视觉传感器图像的动态范围，提高拍摄速度。而且，为每个非目标第一类感光器件引入一个第一类控制开关，可以对得到的光强梯度信息进行控制，实现对仿生视觉传感器图像的动态范围的调整，进而实现对拍摄速度的调整，实现了可重配的效果。另一方面，通过电压模式有源像素传感器模拟视锥细胞的作用，可以输出表征目标光信号中的光强信息的目标电压信号，实现对目标光信号中的光强信息的感知作用，得到的目标电压信号表征光强信息的精度更高，可以得到更高质量的图像，即图像具有更高的图像信噪比。
[0060] 在上述实施例的基础上，本发明实施例中提供的双模态仿生视觉传感器，当所述目标光信号的光照度大于第一预设值时，所有所述第一类控制开关同时导通，当所述目标光信号的强度小于第二预设值时，所有所述第一类控制开关同时断开。
[0061] 具体地，所有的第一类控制开关均相互独立，一个导通与断开并不会影响另一个，可以根据需要选择导通的数量和断开的数量，也可以全部导通或全部断开。本发明实施例中，为获得更好的效果，可以在目标光信号的光照度大于第一预设值时，使所有第一类控制开关同时导通，当目标光信号的强度小于第二预设值时，使所有第一类控制开关同时断开。其中第一预设值、第二预设值可以根据感光器件的类型、参数以及环境光照度进行确定。例如，第一预设值可以为10klux，第二预设值可以为50lux。即，当目标光信号的光照度大于第一预设值时，说明为强光照，此时为防止第一类电流模式有源像素传感器电路内DAC与比较器饱和，将所有第一类控制开关同时导通，此时所有非目标第一类感光器件有效，第一类电流模式有源像素传感器电路输出的指定数字信号为差模信号，可以使仿生视觉传感器得到图像的边缘信息。当目标光信号的强度小于第二预设值时，说明为弱光照，此时经目标第一类感光器件转换得到的第一类电流信号I1很小。因此将所有第一类控制开关同时断开，此时所有非目标第一类感光器件无效，第一类电流模式有源像素传感器电路输出的指定数字信号为共模信号，可以使仿生视觉传感器得到图像的原始信息。本发明实施例中提供的第一类电流模式有源像素传感器电路更好的仿真人眼的Gap Junction连接，从而实现对于仿生视觉传感器的图像动态范围的提高。
[0062] 需要说明的是，当目标光信号的光照度大于第一预设值且小于第二预设值时，说明光照适中，此时所有第一类控制开关中可以部分导通部分断开。当至少一个第一类控制开关导通时，第一类电流模式有源像素传感器电路输出的指定数字信号均为差模信号，当所有第一类控制开关断开时，第一类电流模式有源像素传感器电路输出的指定数字信号为共模信号。
[0063] 在上述实施例的基础上，本发明实施例中提供的双模态仿生视觉传感器，所述第一类电流模式有源像素传感器电路还包括：第一电流放大器、比较器、加法器和数模转换器；
[0064] 所述目标第一类感光器件与所述第一电流放大器相连，所述第一电流放大器与所述比较器的一个输入端相连；
[0065] 所述加法器的输入端分别与所述第一类控制开关连接，所述加法器的输出端与所述比较器的另一个输入端相连；
[0066] 所述比较器的输出端与所述数模转换器相连，所述数模转换器将输入的指定数字信号转换为指定模拟信号，并将所述指定模拟信号输出至所述第一电流放大器或者所述加法器，直至所述比较器的输出端输出事件脉冲信号，所述第一类电流模式有源像素传感器电路输出所述指定数字信号，所述指定数字信号用于表征所述目标光信号中的光强梯度信息。
[0067] 具体地，如图2所示，为本发明实施例中提供的用于控制目标第一类感光器件的第一类电流模式有源像素传感器电路。图2中，第一类电流模式有源像素传感器电路包括目标第一类感光器件11、第一电流放大器12、比较器13、加法器14和数模转换器(Digital to Analog Converter，DAC)15，目标第一类感光器件11与第一电流放大器12相连，第一电流放大器12用于对目标第一类感光器件11转换得到的第一类电流信号I0进行放大，放大的倍数为第一预设数量，即放大的倍数与目标第一类感光器件11周围的非目标第一类感光器件的数量相等，以保证放大后的第一类电流信号与目标第一类感光器件11周围第一预设数量个非目标第二类感光器件转换得到的第二类电流信号之和在同一量级上。需要说明的是，本发明实施例中提供的第一类感光器件中不存在滤光器(Colorfilter，CF)，因此第一类感光器件的响应波段与自身相关。
[0068] 第一电流放大器12与比较器13的一个输入端相连，将放大后的第一类电流信号输入至比较器13中。目标第一类感光器件11周围的4个非目标第一类感光器件均分别与加法器14的输入端相连。由于每个非目标第一类感光器件均与一个第一类控制开关串联。本发明实施例中仅示出了与每个非目标第一类感光器件串联的第一类控制开关M1、M2、M3、M4。
[0069] 加法器14的输出端与比较器13的另一个输入端相连。4个非目标第一类感光器件转换得到的电流信号I1、I2、I3、I4分别输入至加法器14，由加法器14对I1、I2、I3、I4进行求和，并将求和结果输入至比较器13。由比较器13对放大后的第一类电流信号以及加法器14的求和结果进行比较。当前一时刻与当前时刻的比较结果一致，则不做输出，由DAC15将输入的指定数字信号转换为指定模拟信号，并将指定模拟信号输出至第一电流放大器12或者加法器14，输出至第一电流放大器12的指定模拟信号记为IDA2，输出至加法器14的指定模拟信号记为IDA1。输出后再通过比较器13进行比较，当前一时刻与后一时刻的比较结果相反时，由比较器13的输出端输出事件脉冲信号，即比较器13处于边沿触发状态，此时第一类电流模式有源像素传感器电路输出指定数字信号，指定数字信号用于表征目标光信号中的光强梯度信息。其中，第一类电流模式有源像素传感器电路输出的指定数字信号是一种用0和1表示的数字信号。
[0070] 其中，输入至DAC15的指定数字信号可以是人为输入的周期性增加的指定数字信号，指定数字信号的变化形式具体如图3所示，指定数字信号具体随时间呈阶梯型递增，当某一时刻N*step时，指定数字信号取值为ΔI，比较器13输出事件脉冲信号，即比较器13处于边沿触发状态，则将此时的ΔI作为第一类电流模式有源像素传感器电路的输出。其中，N为此前经过的台阶数，step为每一台阶经过的时长。
[0071] 需要说明的是，本发明实施例中的加法器可以是实际的器件，也可以是实现加法功能的功能模块，例如可以通过将电流信号I1、I2、I3、I4所在的线路合并成一条线路实现。而且，第一电流放大器也可以是实际的器件，也可以是实现电流放大功能的功能模块，本发明实施例中对此不作具体限定。
[0072] 在上述实施例的基础上，本发明实施例中提供的双模态仿生视觉传感器，所述第一类电流模式有源像素传感器电路还包括：三态门电路；
[0073] 所述三态门电路分别与所述比较器的输出端以及所述数模转换器的输入端连接；
[0074] 所述三态门电路用于在所述比较器的输出端输出所述事件脉冲信号时，输出所述指定数字信号。
[0075] 具体地，如图4所示，本发明实施例中，在第一类电流模式有源像素传感器电路中还包括：三态门电路41。三态门电路41分别与比较器13的输出端以及DAC15的输入端连接；三态门电路41用于在比较器13的输出端输出事件脉冲信号时，即比较器13处于边沿触发状态，输出指定数字信号。
[0076] 如图5所示，为本发明实施例中提供的第一类电流模式有源像素传感器电路的具体结构示意图。图5中，电路结构51模拟视杆细胞电路，电路结构52模拟节细胞与双极细胞。Vcc为控制电路的电源，目标第一类感光器件53与Vcc连接，目标第一类感光器件53转换得到的第一类电流信号I0经电流镜54放大4倍后与比较器(Comparer，CP)56的输入端连接，目标第一类感光器件53周围的4个非目标第一类感光器件转换得到的电流信号分别为I1、I2、I3、I4。
[0077] 需要说明的是，图5中电流镜54为第一电流放大器。图5中并未画出目标第一类感光器件53周围的4个非目标第一类感光器件，仅仅画出了与每个非目标第一类感光器件串联的第一类控制开关M1、M2、M3、M4。I1、I2、I3、I4所在的线路合并成一条线路，实现加法器的作用。合并的一条线路与CP56的输入端连接。由CP56对放大后的第一类电流信号以及I1、I2、I3、I4之和进行比较。当前一时刻与当前时刻的比较结果一致，则不做输出，由DAC55将输入的指定数字信号转换为指定模拟信号，并将指定模拟信号输出至目标第一类感光器件53或者某一个非目标第一类感光器件。输出后再通过CP56进行比较，当前一时刻与后一时刻的比较结果相反时，由CP56的输出端输出事件脉冲信号，即CP56处于边沿触发状态，此时由三态门电路57输出指定数字信号。
[0078] 在图5中，CP56与地之间还连接有电容58，电容58可以是实际电容，也可以是第一类电流模式有源像素传感器电路中虚拟出来的寄生电容，本发明实施例中对此不作具体限定。
[0079] 在上述实施例的基础上，本发明实施例中提供的双模态仿生视觉传感器，第一类电流模式有源像素传感器电路还包括：存储单元。存储单元与三态门电路的输出端连接，用于存储第一类电流模式有源像素传感器电路输出的指定数字信号。存储单元具体可以是寄存器、锁存器、SRAM、DRAM、忆阻器等。以寄存器为例，寄存器的位数可以根据DAC的精度进行选择，本发明实施例中在此可选择4位寄存器。
[0080] 在上述实施例的基础上，本发明实施例中提供的双模态仿生视觉传感器，所述电压模式有源像素传感器电路具体包括：所述目标第一类感光器件周围的第二预设数量个所述第二类感光器件，每个所述第二类感光器件均分别与一个第二类控制开关串联，同一时刻仅存在一个第二类控制开关处于导通状态；
[0081] 所述电压模式有源像素传感器电路还包括：电流积分器、快门以及模数转换器，每个所述第二类感光器件以及串联的第二类控制开关构成器件支路，所有器件支路并联连接且共用所述电流积分器、所述快门以及所述模数转换器；
[0082] 所述电流积分器用于获取所述电压模式有源像素传感器电路中目标电容的电压模拟信号；所述快门用于控制所述电流积分器的积分时间；所述模数转换器用于将所述目标电容的电压模拟信号转换为所述目标电压信号。
[0083] 具体地，本发明实施例中提供的双模态仿生视觉传感器中，可以多个第二类感光器件共用一个电压模式有源像素传感器，即每个电压模式有源像素传感器电路中包括目标第一类感光器件周围的第二预设数量个第二类感光器件。可以理解为，由目标第一类感光器件和周围的第二预设数量个第二类感光器件构成一组，该组内的目标第一类感光器件由一个电流模式有源像素传感器控制，该组内的所有非目标第一类感光器件由一个电压模式有源像素传感器控制。
[0084] 如图6所示，为本发明实施例中提供的电压模式有源像素传感器的结构示意图。图6中，包括：4个第二类感光器件61、电流积分器(Current Integrator，CI)62、快门64以及模数转换器(Analog-to-Digital Converter，ADC)63。每个第二类感光器件61分别与一个第二类控制开关65串联，同一时刻仅存在一个第二类控制开关65处于导通状态。每个第二类感光器件61与串联的第二类控制开关65构成一个器件支路，4个器件支路并联，共用CI62、快门64以及ADC63。第二类控制开关65具体可以是MOS管。
[0085] CI62用于获取电压模式有源像素传感器电路中目标电容的电压模拟信号；ADC63用于将所述目标电容的电压模拟信号转换为所述目标电压信号。快门64用于控制CI62的积分时间。例如，快门64控制CI62的积分时间为33ms，则33ms后，快门64闭合，CI62得到目标电容的电压模拟信号，并由ADC63读出。本发明实施例中还可以在ADC63后连接一存储单元，将ADC63读出的目标电容的电压模拟信号存储在存储单元中。存储单元413具体可以是寄存器、锁存器、SRAM、DRAM、忆阻器等。以寄存器为例，寄存器的位数可以根据ADC63的精度进行选择，本发明实施例中在此可选择8位寄存器存储目标电容的电压模拟信号。在ADC63读出动作完成后，还可以断开快门64，继续使CI62对目标电容的电流进行积分。循环上述步骤可以完成对视频信号的获取。
[0086] 如图7所示，为本发明实施例中提供的电压模式有源像素传感器电路的具体结构示意图。图7中，共包括4个第二类感光器件，分别为71、72、73、74，第二类感光器件71与第二类控制开关75串联形成第一器件支路，第二类感光器件72与第二类控制开关76串联形成第二器件支路，第二类感光器件73与第二类控制开关78串联形成第三器件支路，第二类感光器件74与第二类控制开关77串联形成第四器件支路。第一器件支路、第二器件支路、第三器件支路以及第四器件支路并联后与MOS管79、710连接，MOS管710与MOS管711连接。MOS管79用于起偏置作用，MOS管710用于起开关作用，MOS管711用于对某一器件支路上的第二类感光器件转换得到的第三类电流信号进行电流积分，得到目标电压信号，表征目标光信号中的光强信息。
[0087] 本发明实施例中提供的电压模式有源像素传感器电路，通过与每个第二类感光器件串联的第二类控制开关实现对器件支路的控制，进而实现一个电压模式有源像素传感器电路控制多个第二类感光器件的功能，提高了双模态仿生视觉传感器的集成度。
[0088] 在上述实施例的基础上，本发明实施例中提供的双模态仿生视觉传感器，还包括：第二类电流模式有源像素传感器电路；
[0089] 所述第二类电流模式有源像素传感器电路包括一个所述非目标第一类感光器件和所述第二预设数量个电流镜；
[0090] 每个电流镜分别与所述非目标第一类感光器件周围的一个所述第二类感光器件串联。
[0091] 具体地，本发明实施例中，用于控制非目标第一类感光器件的第二类电流模式有源像素传感器电路具体包括：非目标第一类感光器件和第二预设数量个电流镜，每个电流镜分别与非目标第一类感光器件周围的一个目标第一类感光器件串联。也就是说，本发明实施例中每个第二类电流模式有源像素传感器电路均控制一个非目标第一类感光器件。
[0092] 如图8所示，第二类电流模式有源像素传感器电路包括一个非目标第一类感光器件81和4个第一类电流镜82、83、84、85。每个第一类电流镜分别与非目标第一类感光器件81周围的一个目标第一类感光器件串联，即将非目标第一类感光器件81转换得到的电流信号I1复制成4个I1，分别用于包括非目标第一类感光器件81周围的每个目标第一类感光器件的第一类电流模式有源像素传感器电路获取到目标光信号中的光强梯度信息，以实现非目标第一类感光器件的复用，提高双模态仿生视觉传感器的像素填充因子。
[0093] 在上述实施例的基础上，本发明实施例中提供的双模态仿生视觉传感器，所述第一类感光器件具体为光电二极管(Photo-Diode，PD)，也可以是其他可以将光信号转换为电流信号的器件，本发明实施例中对此不作具体限定。需要说明的是，第一类感光器件中不包含有滤光器。
[0094] 在上述实施例的基础上，本发明实施例中提供的双模态仿生视觉传感器，所述第二类感光器件具体包括滤光器和光电二极管；
[0095] 所述滤光器用于获取所述目标光信号，从所述目标光信号中提取指定频段的光信号；所述光电二极管用于将所述指定频段的光信号转换为所述第三类电流信号。
[0096] 具体地，本发明实施例中，第二类感光器件用于对目标光信号中的彩色分量进行感应，第二类感光器件具体可以包括PD和设置在PD上的滤色器(Colour Filter，CF)，最终由仿生视觉传感器得到的图像是彩色图像。其中，CF用于获取目标光信号，从目标光信号中提取指定频段的光信号，PD将指定频段的光信号光信号转换为第三类电流信号。滤色器具体可以是滤光片或者透镜，用于透过指定波长的光信号。当滤色器为透镜时，具体可选用拜伦透镜，也可以选用其他类型的透镜。滤色器按透过光信号的波长大小可分为红色滤色器、蓝色滤色器以及绿色滤色器，其透过的光信号分别为红光信号、蓝光信号和绿光信号。
[0097] 需要说明的是，第二类感光器件还可以直接由光电二极管组成，通过选取不同响应曲线的光电二极管实现获取目标光信号，从目标光信号中提取指定波段的光信号，并将指定波段的光信号转换为第三类电流信号的作用。
[0098] 在上述实施例的基础上，本发明实施例中提供的双模态仿生视觉传感器，所述双模态仿生视觉传感器的像素阵列由所述目标第一类感光器件、所述非目标第一类感光器件以及所述第二类感光器件排列形成；
[0099] 所述像素阵列的每一行中，所述第二类感光器件与所述目标第一类感光器件相间排列，或者所述第二类感光器件与所述非目标第一类感光器件相间排列。
[0100] 具体地，像素阵列的排布方式结构示意图可以如图9所示，其中包括第一类感光器件91和第二类感光器件92，每个第一类感光器件和每个第二类感光器件均分别构成一个像素。第一类感光器件91中的目标第一类感光器件标记为“+”，非目标第一类感光器件标记为“-”。包含有红色滤色器的第二类感光器件92标记为“R”，包含有蓝色滤色器的第二类感光器件92标记为“B”，包含有绿色滤色器的第二类感光器件92标记为“G”。每个目标第一类感光器件周围具有4个非目标第一类感光器件以及4个第二类感光器件，每个非目标第一类感光器件周围具有4个目标第一类感光器件及4个第二类感光器件。
[0101] 像素阵列的排布方式结构示意图也可以如图10所示，其中包括第一类感光器件101和第二类感光器件102，第一类感光器件101中的目标第一类感光器件标记为“+”，非目标第一类感光器件标记为“-”。包含有红色滤色器的第二类感光器件102标记为“R”，包含有蓝色滤色器的第二类感光器件102标记为“B”，包含有绿色滤色器的第二类感光器件102标记为“G”。每个目标第一类感光器件周围具有6个非目标第一类感光器件以及2个第二类感光器件，每个非目标第一类感光器件周围具有2个目标第一类感光器件以及4个第二类感光器件，或者每个非目标第一类感光器件周围具有4个目标第一类感光器件以及2个第二类感光器件。像素阵列的排布方式也可以是其他形式，本发明实施例中对此不作具体限定。
[0102] 相应地，图9中示出的像素阵列，对应的第一预设数量和第二预设数量均为4，图10示出的像素阵列，对应的第一预设数量为6，第二预设数量为2或4。本发明实施例中均以图9中示出的像素阵列为例进行说明。例如，图7中的第二类感光器件71可以是标记为“G”的第二类感光器件，第二类感光器件72、73可以是标记为“R”的第二类感光器件，第二类感光器件74可以是标记为“B”的第二类感光器件。
[0103] 在上述实施例的基础上，本发明实施例中提供的双模态仿生视觉传感器，所述第一类电流模式有源像素传感器电路还包括：第二电流放大器；
[0104] 所述第二电流放大器连接在所述目标第二类感光器件与所述第一电流放大器之间。
[0105] 具体地，本发明实施例中，由于第一类感光器件转换得到的电流信号较小，因此可以在第一电流放大器与目标第一类感光器件之间连接有第二电流放大器，用于为目标第一类感光器件转换得到的第一类电流信号进行初步放大。第二电流放大器可以是实际的器件，也可以是实现电流放大功能的功能模块，本发明实施例中对此不作具体限定。相应地，目标第一类感光器件周围的非目标第一类感光器件与加法器之间也设置有第二电流放大器，使加法器之前每个非目标第一类感光器件所处支路的电流信号与目标第一类感光器件所处支路的电流信号处于同一量级。
[0106] 在上述实施例的基础上，本发明实施例中提供的双模态仿生视觉传感器，所述目标电压信号和所述指定数字信号共同形成图像。
[0107] 具体地，本发明实施例中，将目标电压信号和指定数字信号共同形成图像。需要注意的是，目标电压信号与指定数字信号的输出形式与速度并不相同。目标电压信号的输出速度约为30ms。而由于第一类电流模式有源像素传感器电路中数模转换器的扫描速度约为1ms，其后采用异步事件地址表示方式输出，具体为(X,Y,P,T)。其中，“X,Y”为事件地址，“P”为4值事件输出(包括第一位符号位)，“T”为事件产生的时间。
[0109] 最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
| 标题 | 发布/更新时间 | 阅读量 |
|---|---|---|
| 视锥视杆双模态仿生视觉传感器 | 2020-05-08 | 824 |
| 像素放大装置、包括其的CMOS图像传感器及其操作方法 | 2020-05-08 | 37 |
| 具有像素级互连部的堆叠式光电传感器组件 | 2020-05-08 | 369 |
| 基于光的通信系统 | 2020-05-08 | 130 |
| 包括激光屏障图案的图像传感器 | 2020-05-11 | 536 |
| 一种多传感器复合右心室电极及融合心脏起搏频率自适应调节方法 | 2020-05-08 | 922 |
| 一种用于新能源发电的转换电池 | 2020-05-11 | 630 |
| 光传感器、基于飞行时间的测距系统和电子装置 | 2020-05-08 | 356 |
| 激光接收装置的偏置电压控制方法、调整方法、控制装置以及补偿电路系统 | 2020-05-08 | 23 |
| 一种多功能智能LED灯控制系统 | 2020-05-08 | 78 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台，是提供专利分析，专利查询，专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据，免费查、免费专利分析。
分析报告
专利汇分析报告产品可以对行业情报数据进行梳理分析，涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度，系统通过AI智能系统对图表进行解读，只需1分钟，一键生成行业专利分析报告。
光电二极管热门专利
QQ群二维码
意见反馈
意见反馈