低光视觉辅助

申请号 CN201280075299.6 申请日 2012-08-14 公开(公告)号 CN104583841A 公开(公告)日 2015-04-29
申请人 诺基亚公司; 发明人 M·J·吕奥奥南;
摘要 一种用于增强的夜视系统的用于装备车辆的便携式单元。该便携式单元执行:利用便携式单元的显示器向用户呈现信息;通过便携式单元接收来自红外相机的红外图像 信号 ;以及通过便携式单元的显示器向用户呈现由红外图像信号所描述的物体。公开了对应的方法、装置、系统和 计算机程序 。
权利要求

1.一种装置,包括:
便携式单元;
在所述便携式单元中的显示器,被配置为向用户呈现信息;
在所述便携式单元中的处理器,被配置为接收来自红外相机的红外图像信号并且使得通过所述显示器向所述用户呈现由所述红外图像信号所描述的物体。
2.根据权利要求1所述的装置,还包括所述红外相机。
3.根据权利要求2所述的装置,其中所述红外相机是方向可调的。
4.根据权利要求2或3所述的装置,其中所述便携式单元包括所述红外相机。
5.根据前述权利要求任一项所述的装置,其中所述显示器是被配置为通过投影到车辆的挡玻璃上来形成图像的投影显示器。
6.根据前述权利要求任一项所述的装置,还包括保持器,所述保持器被配置为保持所述便携式单元在车辆中位于对所述车辆的驾驶员可见的位置处。
7.根据权利要求2或3所述的装置,其中所述保持器包括所述红外相机。
8.根据前述权利要求任一项所述的装置,还包括红外灯,所述红外灯被配置为照射物体以便促进所述红外相机的操作。
9.根据权利要求8所述的装置,其中所述红外灯相机是方向可调的。
10.根据权利要求8或9所述的装置,其中所述便携式单元包括所述红外灯。
11.根据权利要求8或9所述的装置,其中所述保持器包括所述红外灯。
12.根据前述权利要求任一项所述的装置,其中所述处理器还被配置为接收来自可见光相机的可见光图像信号,所述可见光相机具有与所述红外相机重叠的视场,并且所述处理器被配置为通过将所述可见光图像信号与所述红外图像信号进行比较来识别对人眼不能充分可见的物体。
13.根据权利要求12所述的装置,还包括所述可见光相机。
14.根据权利要求13所述的装置,其中所述可见光相机是方向可调的。
15.根据权利要求13或14所述的装置,其中所述可见光相机处于所述便携式单元中。
16.根据权利要求6至11中任一项所述的装置,其中所述处理器还被配置为接收来自可见光相机的可见光图像信号,所述可见光相机具有与所述红外相机重叠的视场,并且所述处理器被配置为通过将所述可见光图像信号与所述红外图像信号进行比较来识别对人眼不能充分可见的物体;并且
所述装置还包括所述保持器中的所述可见光相机。
17.根据权利要求16所述的装置,其中所述可见光相机是方向可调的。
18.根据权利要求12至17中任一项所述的装置,其中所述处理器还被配置为:
运行应用并且使得显示与所述应用相关的信息;以及
终止使得在所述显示器的至少一部分上显示与所述应用相关的信息,并且反而形成并且使得显示包括所识别的对人眼不能充分可见的物体的图像。
19.根据权利要求18所述的装置,其中所述应用是导航应用。
20.根据权利要求18所述的装置,其中所述应用是音乐播放器应用。
21.根据权利要求12至20中任一项所述的装置,其中所述处理器还被配置为在识别出对人眼不能充分可见的物体时发出警报。
22.根据权利要求12至21中任一项所述的装置,其中所述处理器还被配置为使得所述显示器高亮显示所识别的对人眼不能充分可见的物体。
23.根据权利要求12至22中任一项所述的装置,其中所述处理器还被配置为估计所识别的对人眼不能充分可见的物体能够造成的危险,并且被配置为使得如果需要则采取碰撞预防措施。
24.一种方法,包括:
利用便携式单元的显示器向用户呈现信息;
通过所述便携式单元接收来自红外相机的红外图像信号;以及
通过所述便携式单元的所述显示器向所述用户呈现由所述红外图像信号所描述的物体。
25.根据权利要求24所述的方法,还包括通过红外相机形成所述红外图像信号。
26.根据权利要求24或25所述的方法,其中所述呈现所述物体包括将图像投影到车辆的挡风玻璃上。
27.根据权利要求24至26中任一项所述的方法,还包括通过红外光照射物体以便促进所述红外相机的操作。
28.根据权利要求24至27中任一项所述的方法,还包括:
接收来自可见光相机的可见光图像信号,所述可见光相机具有与所述红外相机重叠的视场;以及
通过将所述可见光图像信号与所述红外图像信号进行比较来识别对人眼不能充分可见的物体。
29.根据权利要求28所述的方法,还包括:
运行应用;
显示与所述应用相关的信息;以及
终止在所述显示器的至少一部分上显示与所述应用相关的信息,并且反而形成并且显示包括所识别的对人眼不能充分可见的物体的图像。
30.根据权利要求29所述的方法,其中所述应用是导航应用。
31.根据权利要求29所述的方法,其中所述应用是音乐播放器应用。
32.根据权利要求24至31中任一项所述的方法,还包括:在识别出对人眼不能充分可见的物体时发出警报。
33.根据权利要求24至32中任一项所述的方法,还包括:在所述显示器的呈现上高亮显示所识别的对人眼不能充分可见的物体。
34.根据权利要求24至33中任一项所述的方法,还包括:估计所识别的对人眼不能充分可见的物体能够造成的危险,并且使得如果需要则采取碰撞预防措施。
35.一种装置,包括:
至少一个处理器;以及
包括计算机程序代码的至少一个存储器
所述至少一个存储器和所述计算机程序代码被配置为与所述至少一个处理器一起使得所述装置至少执行以下操作:
利用便携式单元的显示器向用户呈现信息;
通过所述便携式单元接收来自红外相机的红外图像信号;以及
通过所述便携式单元的所述显示器向所述用户呈现由所述红外图像信号所描述的物体。
36.根据权利要求35所述的装置,其中所述至少一个存储器和所述计算机程序代码被配置为与所述至少一个处理器一起使得所述装置执行根据权利要求24至34中任一项所述的方法。
37.一种系统,包括:
根据权利要求1至23或35至36中任一项所述的装置;以及
车辆,包括被配置为与所述装置共同操作的辅助元件。
38.根据权利要求37所述的系统,其中所述辅助元件是所述红外相机。
39.根据权利要求37所述的系统,其中所述辅助元件是红外灯,所述红外灯被配置为照射物体以便促进所述红外相机的操作。
40.根据权利要求38所述的系统,其中所述车辆还包括红外灯,所述红外灯被配置为照射物体以便促进所述红外相机的操作。
41.一种计算机程序,在所述计算机程序在处理器上运行时,包括:
用于利用便携式单元的显示器向用户呈现信息的代码;
用于通过所述便携式单元接收来自红外相机的红外图像信号的代码;以及用于通过所述便携式单元的所述显示器向所述用户呈现由所述红外图像信号所描述的物体的代码。
42.根据权利要求41所述的计算机程序,其中所述计算机程序是包括计算机可读介质的计算机程序产品,所述计算机可读介质承载具体化于其中的用于与计算机一起使用的计算机程序代码。

说明书全文

低光视觉辅助

技术领域

[0001] 本发明总体上低光视觉辅助。本申请具体地、但不是排他地涉及车辆驾驶员的低光视觉辅助。

背景技术

[0002] 车辆的安全性以各种方式得以改善,包括通过改善制动系统、设计稳定性改善系统和利用更好的前照灯来改善驾驶员的视觉,减少碰撞后果的严重程度以及减少碰撞的可能性。
[0003] 然而,对于改善前照灯存在限制,因为太强的光线会导致交通系统中的其他驾驶员的眩光。为了减少这些不利影响,最强的汽车灯进行自动方向调整,以保持它们的光束与路面对准。这种重定向系统尚不昂贵,但是不适合安装在汽车产品上。基于红外的夜视是已经特别用于军事应用的另一种技术。然而,红外光对人的裸眼不可见,并且因此夜视必须被提供在单独的显示器上。结果,红外夜视在普通家用型汽车中仍然相当不寻常。

发明内容

[0004] 本发明的示例的各个方面在权利要求中阐述。
[0005] 根据本发明的第一示例方面,提供了一种装置,包括:
[0006] 便携式单元;
[0007] 在所述便携式单元中的显示器,被配置为向用户呈现信息;
[0008] 在所述便携式单元中的处理器,被配置为接收来自红外相机的红外图像信号,并且使得通过所述显示器向所述用户呈现由所述红外图像信号所描述的物体。
[0009] 根据本发明的第二示例方面,提供了一种方法,包括:
[0010] 利用便携式单元的显示器向用户呈现信息;
[0011] 通过所述便携式单元接收来自红外相机的红外图像信号;以及
[0012] 通过所述便携式单元的所述显示器向所述用户呈现由所述红外图像信号所描述的物体。
[0013] 根据本发明的第三示例方面,提供了一种装置,包括:
[0014] 至少一个处理器;以及
[0015] 包括计算机程序代码的至少一个存储器
[0016] 所述至少一个存储器和所述计算机程序代码被配置为使用所述至少一个处理器使得所述装置至少执行以下操作:
[0017] 利用便携式单元的显示器向用户呈现信息;
[0018] 通过所述便携式单元接收来自红外相机的红外图像信号;以及
[0019] 通过所述便携式单元的所述显示器向所述用户呈现由所述红外图像信号所描述的物体。
[0020] 根据本发明的第四示例方面,提供了一种系统,包括:
[0021] 根据第一或第二示例方面所述的装置;以及
[0022] 车辆,包括被配置为与所述装置共同操作的辅助元件。
[0023] 根据本发明的第五示例方面,提供了一种计算机程序,在所述计算机程序在处理器上运行时,包括:
[0024] 用于利用便携式单元的显示器向用户呈现信息的代码;
[0025] 用于通过所述便携式单元接收来自红外相机的红外图像信号的代码;以及[0026] 用于通过所述便携式单元的所述显示器向所述用户呈现由所述红外图像信号所描述的物体的代码。
[0027] 在前文中说明了本发明的不同的非约束性的示例方面和实施例。前文中的实施例仅仅用于解释可以在本发明的实现中所利用的所选的方面和步骤。可以仅参考本发明的特定示例方面来给出一些实施例。应该理解,对应的实施例也可以应用于其他示例方面。附图说明
[0028] 对于本发明的示例实施例的更全面的理解,现在参考结合附图进行的以下描述,附图中:
[0029] 图1示出本发明的一个示例实施例的系统的架构概览;
[0030] 图2示出另一个示例实施例的便携式单元的框图,在该实施例中,便携式单元包括照射单元、可见光相机和红外相机;
[0031] 图3示出图示根据一个示例实施例的过程的流程图
[0032] 图4示出在汽车的低光照明下所拍摄的夜间的道路的可见光相机图像;
[0033] 图5示出以其他方式拍摄的对应于图4的红外相机图像;并且
[0034] 图6示出根据一个示例实施例提供的具有警告指示的显示器图象。

具体实施方式

[0035] 本发明的示例实施例及其潜在优势通过参考附图中的图1至6来理解。
[0036] 图1示出本发明的示例实施例的系统100的架构概述。系统100包括:车辆110,比如汽车、船、或者货车;装置120,其具有便携式单元122和用于将便携式单元122支持到例如车辆110的一些结构或者用户180的保持器124。该系统还包括挡玻璃140、红外相机150、可见光相机160和用于促进红外相机150和/或可见光相机160的操作的照射单元170。
[0037] 应当理解,本发明的不同示例实施例不需要包含图1中所示的所有元件,或者所示元件中的一些元件可以被定位在其他地方。例如,红外相机150、可见光相机160和照射单元170中的任何一个或多个可以被定位在保持器124或便携式单元中。虽然没有画出,但是红外相机150和可见光相机160可以通过比如直接电缆或汽车数据总线(比如CAN总线)的有线连接,和/或通过比如蓝牙、无线局域网(WLAN)的无线连接,或通过超宽带(UWB)无线电连接,通信地连接到便携式单元122。
[0038] 便携式单元122可以是例如移动电话、导航设备、音乐播放器、平板电脑、数字图书、个人数字助理或手持式游戏主控制台。
[0039] 照射单元170可以与车辆110的前照灯位于一处。照射单元170例如可以被配置为当在黑暗的时候的像往常一样投射可见光。另外,照射单元可以被配置为例如使用远光前照灯的反射器投射红外光。照射单元170还可以被定位在车辆110的车舱外的其他地方,例如,在车辆110的前部。
[0040] 在另一示例实施例中,其中照射单元170被定位在保持器124和/或便携式单元中,照射单元可以被配置为仅投红外光,从而避免导致杂散光反射到的用户180的眼睛。
[0041] 保持器124在一个示例实施例是除了例如通过使用吸杯、或者通过使用例如由胶胶带固定的粘合板来保持便携式单元122就位之外、不具有任何其他功能的设备。保持器还可以包含光导,用于引导来自便携式单元的红外光通过挡风玻璃140,以便通过红外光照射在车辆110之外的物体。
[0042] 接下来让我们转向图2,其示出了另一示例实施例的便携式单元122的框图,其中便携式单元122包括照射单元170、可见光相机160和红外相机150。
[0043] 便携式单元122包括外壳1221;处理器210;大容量存储器220,例如闪存RAM、硬盘、固态盘、光学存储器;存储在大容量存储器中的软件222,该大容量存储器例如具有用于长期存储的操作系统、应用程序以及用户和应用数据。另外,便携式单元122包括比如随机存取存储器的工作存储器230,利用处理器运行未在大容量存储器中的适合位置处执行的软件。便携式单元122还包括用户接口240,其可以有任何用户接口元素,比如触摸屏、按键、麦克风、扬声器和用于显示信息给用户180的显示器242。可以提供输入/输出250用于与外部设备交换信息。输入/输出250可以是例如,CAN总线接口、通用串行总线接口、蓝牙接口、无线局域网(WLAN)接口。此外,便携式单元122包括卫星导航单元260,比如全球定位系统(GPS)单元、全球导航卫星系统(GLONASS)、或欧盟的伽利略定位系统。
[0044] 处理器210可以在功能上连接到照射单元170以及相机,以便控制它们的操作和接收由相机所拍摄的图像。
[0045] 在具有一种或两种相机150、160和/或具有定位在便携式单元122外的照射单元170的另一示例实例中,对应的通信被配置为流过输入/输出250。
[0046] 图3示出图示根据一个示例实施例的过程的流程图。
[0047] 在开始300,便携式单元122被使用保持器124进行附接,并且被放置在夜视状态。在便携式单元122包括卫星导航模的一个示例实施例中,可以通过确定305天正在被黑并且便携式单元以一定速度(例如,20km/h到150km/h或200km/h)进行运动来自动触发该过程的开始,该速度指示随着可以由用户180驱动的车辆一起移动。可替换地,该过程可以通过经由用户接口240接收310来自用户180的命令而开始。
[0048] 开启红外光照射315。利用红外相机150拍摄320红外图像,并且通过可见光相机160拍摄325可见光图像。图4示出在夜间在汽车的近光照射下的拍摄的道路的这种可见光相机图像的一个示例,并且图5示出以其他方式拍摄的对应于图4的红外相机图像。
[0049] 处理器210接收对应的红外和可见光图像信号330。处理器210在显示器242上呈现红外图像335,并且因此示出由红外图像信号描述的任何物体。在一个示例实施例中,处理器210还通过比较可见光图像信号和红外图像信号来识别340人眼不能充分可见的物体。没有出现在可见光图像信号但是却出现在红外图像信号中的物体可以被识别为这样的不能充分可见的物体。
[0050] 在一个示例实施例中,处理器识别不能充分可见的物体,并且覆盖到可见光相机图像上而不是显示红外图像,345。
[0051] 处理器210可以被配置为运行应用,比如音乐播放器或导航应用,350。在运行这样的一个应用或多个应用时,处理器210还可以执行由图3所图示的过程。如果处理器210识别了前文所描述的不能充分可见的物体,则处理器210可以导致使用显示器242的部分来在显示器242的较早期用于其他目的的部分上显示红外图像和/或告警,355。处理器210可以例如在显示中突出这样的不能充分可见的物体。
[0052] 在一个示例实施例中,处理器210还被配置为评估不能充分可见的物体的尺寸、距离和/或速度,并且/或者还在较早期的不能充分可见的物体变为可见后跟踪它们,360。基于评估,处理器210估计365这些物体可能引起的危险。取决于所估计的危险,处理器
210然后发出或者不发出告警。例如,处理器210可以形成围绕所识别的(当前的或较早期的)不能充分可见的物体的视觉高亮显示,比如图6所举例说明的,图6示出了具有根据一个示例实施例所提供的警告指示的显示器图像。警告指示可以以明亮的色彩和闪烁进行显示。附加地或者可替换地,可以发出听觉警告信号和/或消息。此外,在又一个示例实施例中,如果碰撞看起来即将发生,则处理器210还可以采取碰撞预防措施370,例如,开始即刻制动或者甚至调整转向器。对于这些示例实施例,处理器应当具有并且使用对车辆110的数据总线的安全访问,例如经由输入/输出250,以向车辆110的比如制动控制电路或转向控制的相关控制系统转发命令。
[0053] 不以任何方式限制下面出现的权利要求的范围、解释或应用,本文所公开的一个或多个示例实施例的一个技术效果是现有的车辆可以相对简单且廉价地装备增强的夜视系统。本文所公开的一个或多个示例实施例的另一个技术效果在于使用便携式单元,可以避免另外的不必要设备的安装。结果,与安装专用于夜视的设备相比,可以就减少的对于附加设备的需要而言,材料和能源这二者均得以节省。本文所公开的一个或多个示例实施例的另一个技术效果在于,显然可以利用便携式单元122的现有成像设备来检测通常不可见的物体。本文所公开的一个或多个示例实施例的另一个技术效果在于可以使用保持器124来提供否则缺失的相机或红外照射单元。
[0054] 本发明的实施例可以用软件、硬件、应用逻辑或者软件、硬件和应用逻辑的组合来实现。软件、应用逻辑和/或硬件可以驻留在便携式单元122上、驻留在由保持器124所包括的电路装置中、或者驻留在内建在车辆110的电路装置中。如果需要,部分的软件、应用逻辑和/或硬件可以驻留在便携式单元122上,部分的软件、应用逻辑和/或硬件可以驻留在由保持器124所包括的电路装置中,并且部分的软件、应用逻辑和/或硬件可以驻留在内建在车辆110的电路装置中。在一个示例实施例中,应用逻辑、软件或指令集被维持在各种常规计算机可读介质中的任何一个上。
[0055] 在本文档的上下文中,“计算机可读介质”可以是可含有、存储、传送、传播或传输供指令执行系统、装置或设备(例如计算机)使用或与指令执行系统、装置或设备有关的指令的任何介质或装置,其中在图1和图2中将计算机的一个实例描述和描绘为便携式单元122。计算机可读介质可以包括计算机可读存储介质,该计算机可读存储介质可以为可含有或存储有供指令执行系统、装置或设备(例如计算机)使用或与指令执行系统、装置或设备有关的指令的任何介质或装置。任何前述存储介质可以包括数字数据存储器(比如数字盘片或磁盘)、光存储器、磁存储器、全息存储器、光磁存储器、相变存储器、电阻随机存取存储器、磁性随机存取存储器、固体电解质存储器、电随机存取存储器、有机存储器聚合物存储器。可以将存储器介质成形在除了存储存储器之外不具有其他实质性功能的设备中,或者可以将其形成为具有其他功能的设备的一部分,包括但不限于计算机的存储器、芯片集以及电子设备的子组装。
[0056] 如果需要,则可以不同的顺序和/或同时执行本文所讨论的不同的功能。此外,如果需要,则一个或多个前述功能可为任选的或可对其进行组合。例如,可以执行红外成像而无任何单独的红外照射,尽管经常地,汽车灯也产生一定量的红外照射作为副产物。
[0057] 虽然在独立权利要求中提出本发明的各个方面,但是本发明的其它方面包括来自所描述的实施例和/或从属权利要求的特征与独立权利要求的特征的其它组合,并且不只是权利要求中明确提出的组合。
[0058] 在此还应注意,尽管上文描述了本发明的示例实施例,但是这些描述不应被看作是限制性的。而是,存在可以在不背离所附权利要求中所限定的本发明范围情况下作出的若干变化和修改
QQ群二维码
意见反馈