低光视觉辅助 |
|||||||
申请号 | CN201280075299.6 | 申请日 | 2012-08-14 | 公开(公告)号 | CN104583841B | 公开(公告)日 | 2017-12-05 |
申请人 | 诺基亚技术有限公司; | 发明人 | M·J·吕奥奥南; | ||||
摘要 | 一种用于增强的夜视系统的用于装备车辆的便携式单元。该便携式单元执行:利用便携式单元的显示器向用户呈现信息;通过便携式单元接收来自红外相机的红外图像 信号 ;以及通过便携式单元的显示器向用户呈现由红外图像信号所描述的物体。公开了对应的方法、装置、系统和 计算机程序 。 | ||||||
权利要求 | 1.一种用于车辆的驾驶员的低光视觉辅助的装置,包括: |
||||||
说明书全文 | 低光视觉辅助技术领域背景技术[0003] 然而,对于改善前照灯存在限制,因为太强的光线会导致交通系统中的其他驾驶员的眩光。为了减少这些不利影响,最强的汽车灯进行自动方向调整,以保持它们的光束与路面对准。这种重定向系统尚不昂贵,但是不适合安装在汽车产品上。基于红外的夜视是已经特别用于军事应用的另一种技术。然而,红外光对人的裸眼不可见,并且因此夜视必须被提供在单独的显示器上。结果,红外夜视在普通家用型汽车中仍然相当不寻常。 发明内容[0005] 根据本发明的第一示例方面,提供了一种装置,包括: [0006] 便携式单元; [0007] 在所述便携式单元中的显示器,被配置为向用户呈现信息; [0009] 根据本发明的第二示例方面,提供了一种方法,包括: [0010] 利用便携式单元的显示器向用户呈现信息; [0011] 通过所述便携式单元接收来自红外相机的红外图像信号;以及 [0012] 通过所述便携式单元的所述显示器向所述用户呈现由所述红外图像信号所描述的物体。 [0013] 根据本发明的第三示例方面,提供了一种装置,包括: [0014] 至少一个处理器;以及 [0016] 所述至少一个存储器和所述计算机程序代码被配置为使用所述至少一个处理器使得所述装置至少执行以下操作: [0017] 利用便携式单元的显示器向用户呈现信息; [0018] 通过所述便携式单元接收来自红外相机的红外图像信号;以及 [0019] 通过所述便携式单元的所述显示器向所述用户呈现由所述红外图像信号所描述的物体。 [0020] 根据本发明的第四示例方面,提供了一种系统,包括: [0021] 根据第一或第二示例方面所述的装置;以及 [0022] 车辆,包括被配置为与所述装置共同操作的辅助元件。 [0023] 根据本发明的第五示例方面,提供了一种计算机程序,在所述计算机程序在处理器上运行时,包括: [0024] 用于利用便携式单元的显示器向用户呈现信息的代码; [0025] 用于通过所述便携式单元接收来自红外相机的红外图像信号的代码;以及[0026] 用于通过所述便携式单元的所述显示器向所述用户呈现由所述红外图像信号所描述的物体的代码。 [0027] 在前文中说明了本发明的不同的非约束性的示例方面和实施例。前文中的实施例仅仅用于解释可以在本发明的实现中所利用的所选的方面和步骤。可以仅参考本发明的特定示例方面来给出一些实施例。应该理解,对应的实施例也可以应用于其他示例方面。附图说明 [0028] 对于本发明的示例实施例的更全面的理解,现在参考结合附图进行的以下描述,附图中: [0029] 图1示出本发明的一个示例实施例的系统的架构概览; [0030] 图2示出另一个示例实施例的便携式单元的框图,在该实施例中,便携式单元包括照射单元、可见光相机和红外相机; [0031] 图3示出图示根据一个示例实施例的过程的流程图; [0032] 图4示出在汽车的低光照明下所拍摄的夜间的道路的可见光相机图像; [0033] 图5示出以其他方式拍摄的对应于图4的红外相机图像;并且 [0034] 图6示出根据一个示例实施例提供的具有警告指示的显示器图象。 具体实施方式[0035] 本发明的示例实施例及其潜在优势通过参考附图中的图1至6来理解。 [0036] 图1示出本发明的示例实施例的系统100的架构概述。系统100包括:车辆110,比如汽车、船、或者货车;装置120,其具有便携式单元122和用于将便携式单元122支持到例如车辆110的一些结构或者用户180的保持器124。该系统还包括挡风玻璃140、红外相机150、可见光相机160和用于促进红外相机150和/或可见光相机160的操作的照射单元170。 [0037] 应当理解,本发明的不同示例实施例不需要包含图1中所示的所有元件,或者所示元件中的一些元件可以被定位在其他地方。例如,红外相机150、可见光相机160和照射单元170中的任何一个或多个可以被定位在保持器124或便携式单元中。虽然没有画出,但是红外相机150和可见光相机160可以通过比如直接电缆或汽车数据总线(比如CAN总线)的有线连接,和/或通过比如蓝牙、无线局域网(WLAN)的无线连接,或通过超宽带(UWB)无线电连接,通信地连接到便携式单元122。 [0039] 照射单元170可以与车辆110的前照灯位于一处。照射单元170例如可以被配置为当在黑暗的时候的像往常一样投射可见光。另外,照射单元可以被配置为例如使用远光前照灯的反射器投射红外光。照射单元170还可以被定位在车辆110的车舱外的其他地方,例如,在车辆110的前部。 [0040] 在另一示例实施例中,其中照射单元170被定位在保持器124和/或便携式单元中,照射单元可以被配置为仅投红外光,从而避免导致杂散光反射到的用户180的眼睛。 [0041] 保持器124在一个示例实施例是除了例如通过使用吸杯、或者通过使用例如由胶水或胶带固定的粘合板来保持便携式单元122就位之外、不具有任何其他功能的设备。保持器还可以包含光导,用于引导来自便携式单元的红外光通过挡风玻璃140,以便通过红外光照射在车辆110之外的物体。 [0042] 接下来让我们转向图2,其示出了另一示例实施例的便携式单元122的框图,其中便携式单元122包括照射单元170、可见光相机160和红外相机150。 [0043] 便携式单元122包括外壳1221;处理器210;大容量存储器220,例如闪存RAM、硬盘、固态盘、光学存储器;存储在大容量存储器中的软件222,该大容量存储器例如具有用于长期存储的操作系统、应用程序以及用户和应用数据。另外,便携式单元122包括比如随机存取存储器的工作存储器230,利用处理器运行未在大容量存储器中的适合位置处执行的软件。便携式单元122还包括用户接口240,其可以有任何用户接口元素,比如触摸屏、按键、麦克风、扬声器和用于显示信息给用户180的显示器242。可以提供输入/输出250用于与外部设备交换信息。输入/输出250可以是例如,CAN总线接口、通用串行总线接口、蓝牙接口、无线局域网(WLAN)接口。此外,便携式单元122包括卫星导航单元260,比如全球定位系统(GPS)单元、全球导航卫星系统(GLONASS)、或欧盟的伽利略定位系统。 [0044] 处理器210可以在功能上连接到照射单元170以及相机,以便控制它们的操作和接收由相机所拍摄的图像。 [0045] 在具有一种或两种相机150、160和/或具有定位在便携式单元122外的照射单元170的另一示例实例中,对应的通信被配置为流过输入/输出250。 [0046] 图3示出图示根据一个示例实施例的过程的流程图。 [0047] 在开始300,便携式单元122被使用保持器124进行附接,并且被放置在夜视状态。在便携式单元122包括卫星导航模块的一个示例实施例中,可以通过确定305天正在被黑并且便携式单元以一定速度(例如,20km/h到150km/h或200km/h)进行运动来自动触发该过程的开始,该速度指示随着可以由用户180驱动的车辆一起移动。可替换地,该过程可以通过经由用户接口240接收310来自用户180的命令而开始。 [0048] 开启红外光照射315。利用红外相机150拍摄320红外图像,并且通过可见光相机160拍摄325可见光图像。图4示出在夜间在汽车的近光照射下的拍摄的道路的这种可见光相机图像的一个示例,并且图5示出以其他方式拍摄的对应于图4的红外相机图像。 [0049] 处理器210接收对应的红外和可见光图像信号330。处理器210在显示器242上呈现红外图像335,并且因此示出由红外图像信号描述的任何物体。在一个示例实施例中,处理器210还通过比较可见光图像信号和红外图像信号来识别340人眼不能充分可见的物体。没有出现在可见光图像信号但是却出现在红外图像信号中的物体可以被识别为这样的不能充分可见的物体。 [0050] 在一个示例实施例中,处理器识别不能充分可见的物体,并且覆盖到可见光相机图像上而不是显示红外图像,345。 [0051] 处理器210可以被配置为运行应用,比如音乐播放器或导航应用,350。在运行这样的一个应用或多个应用时,处理器210还可以执行由图3所图示的过程。如果处理器210识别了前文所描述的不能充分可见的物体,则处理器210可以导致使用显示器242的部分来在显示器242的较早期用于其他目的的部分上显示红外图像和/或告警,355。处理器210可以例如在显示中突出这样的不能充分可见的物体。 [0052] 在一个示例实施例中,处理器210还被配置为评估不能充分可见的物体的尺寸、距离和/或速度,并且/或者还在较早期的不能充分可见的物体变为可见后跟踪它们,360。基于评估,处理器210估计365这些物体可能引起的危险。取决于所估计的危险,处理器210然后发出或者不发出告警。例如,处理器210可以形成围绕所识别的(当前的或较早期的)不能充分可见的物体的视觉高亮显示,比如图6所举例说明的,图6示出了具有根据一个示例实施例所提供的警告指示的显示器图像。警告指示可以以明亮的色彩和闪烁进行显示。附加地或者可替换地,可以发出听觉警告信号和/或消息。此外,在又一个示例实施例中,如果碰撞看起来即将发生,则处理器210还可以采取碰撞预防措施370,例如,开始即刻制动或者甚至调整转向器。对于这些示例实施例,处理器应当具有并且使用对车辆110的数据总线的安全访问,例如经由输入/输出250,以向车辆110的比如制动控制电路或转向控制的相关控制系统转发命令。 [0053] 不以任何方式限制下面出现的权利要求的范围、解释或应用,本文所公开的一个或多个示例实施例的一个技术效果是现有的车辆可以相对简单且廉价地装备增强的夜视系统。本文所公开的一个或多个示例实施例的另一个技术效果在于使用便携式单元,可以避免另外的不必要设备的安装。结果,与安装专用于夜视的设备相比,可以就减少的对于附加设备的需要而言,材料和能源这二者均得以节省。本文所公开的一个或多个示例实施例的另一个技术效果在于,显然可以利用便携式单元122的现有成像设备来检测通常不可见的物体。本文所公开的一个或多个示例实施例的另一个技术效果在于可以使用保持器124来提供否则缺失的相机或红外照射单元。 [0054] 本发明的实施例可以用软件、硬件、应用逻辑或者软件、硬件和应用逻辑的组合来实现。软件、应用逻辑和/或硬件可以驻留在便携式单元122上、驻留在由保持器124所包括的电路装置中、或者驻留在内建在车辆110的电路装置中。如果需要,部分的软件、应用逻辑和/或硬件可以驻留在便携式单元122上,部分的软件、应用逻辑和/或硬件可以驻留在由保持器124所包括的电路装置中,并且部分的软件、应用逻辑和/或硬件可以驻留在内建在车辆110的电路装置中。在一个示例实施例中,应用逻辑、软件或指令集被维持在各种常规计算机可读介质中的任何一个上。 [0055] 在本文档的上下文中,“计算机可读介质”可以是可含有、存储、传送、传播或传输供指令执行系统、装置或设备(例如计算机)使用或与指令执行系统、装置或设备有关的指令的任何介质或装置,其中在图1和图2中将计算机的一个实例描述和描绘为便携式单元122。计算机可读介质可以包括计算机可读存储介质,该计算机可读存储介质可以为可含有或存储有供指令执行系统、装置或设备(例如计算机)使用或与指令执行系统、装置或设备有关的指令的任何介质或装置。任何前述存储介质可以包括数字数据存储器(比如数字盘片或磁盘)、光存储器、磁存储器、全息存储器、光磁存储器、相变存储器、电阻随机存取存储器、磁性随机存取存储器、固体电解质存储器、铁电随机存取存储器、有机存储器或聚合物存储器。可以将存储器介质成形在除了存储存储器之外不具有其他实质性功能的设备中,或者可以将其形成为具有其他功能的设备的一部分,包括但不限于计算机的存储器、芯片集以及电子设备的子组装。 [0056] 如果需要,则可以不同的顺序和/或同时执行本文所讨论的不同的功能。此外,如果需要,则一个或多个前述功能可为任选的或可对其进行组合。例如,可以执行红外成像而无任何单独的红外照射,尽管经常地,汽车灯也产生一定量的红外照射作为副产物。 |