车载显示装置 |
|||||||
| 申请号 | CN201480078077.9 | 申请日 | 2014-04-17 | 公开(公告)号 | CN106232427A | 公开(公告)日 | 2016-12-14 |
| 申请人 | 三菱电机株式会社; | 发明人 | 加藤圣崇; 星原靖宪; | ||||
| 摘要 | 车载显示装置(1)包括：多个显示器(9-1～9-m)，该多个显示器设置于车辆内；多个操作接受部(例如触摸面板)，该多个操作接受部与多个显示器(9-1～9-m)分别相对应；图像获取单元个车外摄像头选择多个摄像头图像； 图像处理 控制部(2a)，在操作接受部接受到从多个摄像头图像中选择显示于显示器(9-1～9-m)的摄像头图像的乘坐人员的操作的情况下，该图像处理控制部(2a)指示图像处理命令，该图像处理命令用于生成显示在与该操作接受部相对应的显示器上的图像数据；以及图像合并处理部(4)，该图像合并处理部(4)对于多个显示器(9-1～9-m)，分别根据图像控制处理部(2a)的图像处理命令从多个摄像头图像中选择显示于该显示器的摄像头图像，并生成图像数据。(3)，该图像获取单元(3)从拍摄车辆的周边的多 | ||||||
| 权利要求 | 1.一种车载显示装置，包括： |
||||||
| 说明书全文 | 车载显示装置技术领域[0001] 本发明涉及将拍摄车辆周边而得到的摄像头图像显示在设置于车内的显示器上的车载显示装置。 背景技术[0002] 通过将拍摄车辆周边而得到的摄像头图像显示在设置于车内的显示器上，从而乘坐人员能在显示器上观察车辆的前后左右的障碍物及接近物体(其他车辆、摩托车、自行车、行人等)。副驾驶座或后部座位的乘坐人员在显示器上确认车辆周边的状况并传达给驾驶员，或用于在自身下车时的安全确认，从而形成对驾驶员的驾驶辅助。 [0003] 例如，在专利文献1所涉及的车载用电子设备中，在利用后座乘坐检测传感器检测到后座乘坐、利用后座开门动作检测传感器检测到后座开门动作、利用移动物体接近检测传感器检测到移动物体接近时，控制部指示后座用显示器来显示对于打开后座车门的警报。警报仅显示文字信息，显示文字信息和接近的移动物体的种类。 [0004] 此外，例如专利文献2所涉及的车辆周边监视系统中，在打开处于停车状态的车辆的门之前，利用拍摄单元对车辆的门的至少周边区域的图像进行拍摄，并显示在设置于车辆内的显示装置上，或者接近物检测单元在门的至少周边区域检测到接近物时在显示装置上显示该接近物的图像。现有技术文献 专利文献 [0005] 专利文献1：日本专利特开2013-180634号公报专利文献2：日本专利特开2007-148618号公报 发明内容发明所要解决的技术问题 [0006] 上述专利文献1中，处于传感器的反应范围中的所有的障碍物及移动物体的信息均基于文本显示在画面上，因此对于乘坐人员来说，难以直观地理解，可能会导致混乱。此外，上述专利文献1、2中具有如下问题：同乘人员无法自由地选择将拍摄车辆周边的哪个部分而得到的摄像头图像显示于画面上，无法基于经选择的摄像头图像来对驾驶员进行驾驶辅助。 [0007] 本发明为了解决上述问题而完成，其目的在于，提供一种同乘人员能自由地选择拍摄车辆周边而得到的摄像头图像并将其显示于显示器的车载显示装置。解决技术问题的技术方案 [0008] 本发明所涉及的车载显示装置包括：多个显示器，该多个显示器设置于车辆内；多个操作接受部，该多个操作接受部与多个显示器分别相对应；图像获取单元，该图像获取单元从拍摄车辆的周边的多个车外摄像头获取多个摄像头图像；图像处理控制部，在操作接受部接受到从多个摄像头图像中选择显示于显示器的摄像头图像的乘坐人员的操作的情况下，该图像处理控制部指示图像处理命令，该图像处理命令用于生成显示在与该操作接受部相对应的显示器上的图像数据；以及图像合并处理部，该图像合并处理部对于多个显示器，分别根据图像控制处理部的图像处理命令从多个摄像头图像中选择显示于显示器的摄像头图像，并生成图像数据。发明效果 [0009] 根据本发明，若接受到从多个摄像头图像中选择显示于显示器的摄像头图像的乘坐人员的操作，则从多个摄像头图像中选择显示于显示器的摄像头图像，并生成图像数据，因此能提供一种同乘人员能自由地选择摄像头图像并将其显示于显示器的车载显示装置。附图说明 [0010] 图1是表示本发明的实施方式1所涉及的车载显示装置的结构的框图。图2是表示实施方式1的与图像获取单元相连接的车外摄像头和显示车外摄像头拍摄到的图像的显示器的设置例的图。 图3是表示从车内后座观察图2的显示器的设置状况的图。 图4是表示实施方式1的图像接收部的连接方法的示例的图。 图5是表示与实施方式1的各图像接收部相连接的各显示器的画面结构例的图。 图6是表示与实施方式1的图像接收部相连接的显示器的画面转移例的图。 图7是表示与实施方式1的图像接收部相连接的显示器的画面转移例的图。 图8是表示与实施方式1的图像接收部相连接的显示器的画面转移例的图。 图9是表示与实施方式1的图像接收部相连接的显示器的画面转移例的图。 图10是表示实施方式1所涉及的车载显示装置的动作的流程图。 图11是说明搭载了实施方式1所涉及的车载显示装置的车辆内外的状况的图。 图12是表示图11所示的状况下同乘人员进行的显示器的画面操作和画面转移例的图。 图13是表示用于进行实施方式1的图像合并处理部所进行的图像取得及图像合并处理的缓冲区的设定例的图。 图14是表示实施方式1的图像合并处理部和图像传输处理部的帧单位及行(line)单位下的动作的时序图。 具体实施方式[0011] 下面，为了更详细地说明本发明，根据附图对用于实施本发明的方式进行说明。实施方式1. 如图1所示，实施方式1所涉及的车载显示装置1包括：控制整体的动作的CPU(Central Processing Unit：中央处理器)2、由多个图像获取部3-1～3-n构成的图像获取单元3、进行多个图像的合成及合并等的图像合并处理部4、向图像接收部8-1～8-m传输图像数据的图像传输处理部5、接收图像传输处理部5传输的图像数据的图像接收部8-1～8-m、及显示接收到的图像数据的显示器9-1～9-m。此外，进行搭载于车辆的车载设备的控制的车辆控制部10与车载显示装置1通过车内网络相连接。 [0012] CPU2包括进行车载显示装置1的图像处理整体的控制的图像处理控制部2a、通过车内网络向车辆控制部10发出指示的车辆控制指示部2b。此外，虽省略了图示，但该CPU2包括内部存储器、与周边设备之间进行信息交换的输入输出端口、网络接口等。 [0013] 图像处理控制部2a经由图像传输处理部5和内部总线7获取存储于存储器6b的图像接收部8-1～8-m的状态信息中的图像接收部8-1～8-m的个数、显示尺寸、通信状态、及出错信息。此外，图像处理控制部2a经由图像接收部8-1～8-m、图像传输处理部5、内部总线7，从显示器9-1～9-m获取同乘人员的操作信息。图像处理控制部2a基于获取到的信息，控制图像合并处理部4和图像传输处理部5。 [0014] 车辆控制指示部2b经由内部总线7获取图像合并处理部4检测到的车辆周边的障碍物或接近物体的检测信息。车辆控制指示部2b基于该检测信息将对门的上锁、解锁等车辆的动作进行控制的指示通过车内网络输出至车辆控制部10。车辆控制部10根据车辆控制指示部2b的指示控制车辆的锁门控制系统等，进行门的上锁、解锁等。 [0015] 图像获取单元3具备n个(n≥2)图像获取部3-1～3-n。图像获取部3-1～3-n进行所输入的图像的颜色转换、格式转换等前处理，并输出至图像合并处理部4。作为所输入的图像具有车外摄像头拍摄到的车辆周边(前后左右等)的图像。此外，例如将车载显示装置1兼用作RSE(Rear Seat Entertainment:后座娱乐系统)，能将搭载于车辆的光盘装置输出的DVD(Digital Versatile Disc：数字化通用光盘)或BD(Blu-ray Disc：蓝光光盘；注册商标、以下省略注册商标的记载)等的光盘图像、导航装置输出的导航图像、与车载显示装置1的外部输入端子相连接的智能手机输出的智能手机图像等用作为输入图像。 [0016] 图2表示与图像获取单元3相连接的车外摄像头和显示车外摄像头拍摄得到的图像的显示器的设置例。车辆的前部设置有拍摄车辆前方的前方摄像头11-1、后部设置有拍摄车辆后方的后方摄像头11-2、左侧的后视镜设置有拍摄车辆左侧的左侧摄像头11-3和拍摄车辆左后方的左后方摄像头11-4、右侧的后视镜设置有拍摄车辆右侧的右侧摄像头11-5和拍摄车辆右后方的右后方摄像头11-6。此外，作为与图像接收部8-1～8-m相连接的显示器，在驾驶座与副驾驶座的前方中央设置有前座显示器9-1、在驾驶座和副驾驶座各自的背面分别设置有左后座显示器9-2和右后座显示器9-3。图3表示从车内后座观察前座显示器9-1、左后座显示器9-2及右后座显示器9-3的设置状况的情况。 另外，使用的摄像头的个数及其设置位置可以根据使用的摄像头的视角及分辨率等进行变更。 [0017] 图像合并处理部4进行如下处理：对图像获取部3-1～3-n获取到的多个图像进行合并或合成的处理、根据图像检测移动物体及障碍物的图像处理、用于对移动物体及障碍物进行标记(着色、强调等)的图形绘制处理等。图像合并处理部4经由内部总线7从图像处理控制部2a接受图像处理命令，并执行各处理，将图像合并处理的处理结果(图像数据)存储至存储器6a。此外，图像合并处理部4从存储器6a读取出实施了各处理的图像数据，并输出至图像传输处理部5。将图像合并处理部4所使用的图像取得用缓冲区及图像合并处理·显示用缓冲区配置在存储器6a内。另外，如图1所示，存储器6a设置于图像合并处理部4的外部，也可以内置于图像合并处理部4的内部。 [0018] 图像传输处理部5将从图像合并处理部4接收到的图像数据作为显示于显示器9-1～9-m的图像进行分组化，并附加报头信息来进行发送。图像传输处理部5接收图像接收部8-1～8-m的状态信息及显示器9-1～9-m的操作信息，并保存在存储器6b中。图像处理控制部2a通过读取出存储器6b所保存的信息，能识别图像接收部8-1～8-m的状态信息及操作信息。 [0019] m个(m≥2)图像接收部8-1～8-m连接有m个显示器9-1～9-m。此外，图像接收部8-1～8-m互相级联式连接，从图像传输处理部5发送的分组数据中选择发送给自身的分组数据，进行接收，并且将分组数据传输到连接于下位的图像接收部。图像接收部8-1～8-m将接收到的分组数据所包含的图像数据输出至显示器9-1～9-m并进行显示。另外，可以采用图像接收部8-1～8-m与显示器9-1～9-m相连接的结构，也可以将图像接收部8-1～8-m与显示器9-1～9-m构成为一体。 [0020] 在图1所示那样将图像接收部8-1～8-m级联式连接的情况下，具有能容易地变更图像接收部的连接数的优点。另外，连接方法并不限于级联式连接。图4(a)的示例中，利用总线12将图像传输处理部 5与图像接收部8-1～8-m分别相连接。图4(b)的示例中，图像接收部8-1～8-m分别单独地与图像传输处理部5相连接。另外，图4中，对于图像传输处理部5和图像接收部8-1～8-m以外的结构，省略图示。 [0021] 显示器9-1～9-m的画面与触摸面板构成为一体。显示器9-1～9-m接受图像接收部8-1～8-m输出的图像数据并进行画面显示，并且将触摸面板接受的同乘人员的操作输入作为操作信息输出至图像接收部8-1～8-m。 实施方式1中，将显示器9-1～9-m的触摸面板作为接受同乘人员的操作输入的操作接受部来进行，但也可以将开关、按钮、语音识别装置等输入设备作为操作接受部来使用。 [0022] 图5表示与图像接收部8-1～8-3相连接的显示器9-1～9-3的画面结构例。如图5所示，在输入多个图像的情况下，能自由地构成画面，例如，在一个画面显示一个输入图像、排列配置多个输入图像并同时作为一个合并画面进行显示等。 [0023] 例如，在图5(a)中，前座显示器9-1仅显示导航图像、左后座显示器9-2仅显示光盘图像(例如DVD的电影)、右后座显示器9-3仅显示右后方摄像头11-6拍摄到的右后方图像。图5(b)的前座显示器9-1显示将光盘图像、智能手机图像、左后方摄像头11-4拍摄到的左后方图像、右后方摄像头11-6拍摄到的右后方图像合并后的画面。图5(c)的左后座显示器9-2和右后座显示器9-3显示合并画面，但各图像的显示面积不同。图5(d)的左后座显示器9-2显示在从上方观察车辆而得到的图像的周围排列配置了车外摄像头的图像的合并画面。另外，合成后方图像是为了消除车辆后方的死角而合成后方摄像头11-2、左后方摄像头11-4和右后方摄像头11-6这3个图像而得到的图像。 [0024] 图6～图9表示与图像接收部8-2相连接的左后座显示器9-2的画面转移例。如图6～图9所示，若同乘人员通过左后座显示器9-2的菜单画面上的触摸按钮的操作或画面的触摸操作来选择图像，则在整个画面上显示该图像。另外，对于图像选择，除了菜单画面的触摸按钮操作及画面的触摸操作以外，也可以采用利用开关、按钮、语音等的操作方法。 [0025] 例如，图6中，在左后座显示器9-2中显示菜单画面M。若同乘人员对菜单画面M上的“导航”按钮N进行操作，则左后座显示器9-2对导航图像进行全画面显示。若同乘人员对“DVD”按钮O进行操作，则左后座显示器9-2对光盘图像进行全画面显示。若同乘人员对“外部”按钮P进行操作，则左后座显示器9-2对智能手机图像进行全画面显示。若同乘人员对“左后”按钮Q进行操作，则左后座显示器9-2对左后方图像进行全画面显示。另外，图6中为了易于观察菜单画面M，较大地图示出按钮操作前的左后座显示器9-2，但实际上在按钮操作前后，左后座显示器9-2的大小相同。 [0026] 图7中，在左后座显示器9-2中显示导航图像N、光盘图像O、智能手机图像P、左后方图像Q的合并画面。若同乘人员对导航图像N进行触摸操作，则左后座显示器9-2对导航图像进行全画面显示。若同乘人员对光盘图像O进行触摸操作，则左后座显示器9-2对光盘图像进行全画面显示。若同乘人员对智能手机图像P进行触摸操作，则左后座显示器9-2对智能手机图像进行全画面显示。若同乘人员对左后方图像Q进行操作，则左后座显示器9-2对左后方图像进行全画面显示。 [0027] 图8及图9中，在左后座显示器9-2的左部分显示在从上方观察车辆而得到的图像的周围配置了车外摄像头的图像的画面。图8的情况下，若同乘人员利用触摸操作从画面上的点R描绘至下方的点S，则左后座显示器9-2将由触摸操作选择的左方图像与合成后方图像作为一个画面进行放大显示。图9的情况下，若同乘人员利用触摸操作从画面上的点R描绘至斜下方的点S，则左后座显示器9-2将以触摸操作的轨迹作为对角线的四边形框内的图像作为一个画面进行放大显示。作为图像的选择方法具有如下方法：例如、以从画面上的点R描绘至点S的方式进行触摸、或在规定的时间内触摸点R和点S。同乘人员在画面上双击、捏放(pinch out)等用手指来指定了区域时，指定区域也可以以位于画面中央部的方式进行放大显示。 [0028] 如上所述，同乘人员能从输入至车载显示装置1的图像和其合成图像中自由地选择希望观看的图像，并显示于显示器。例如，在停车或车道变更等时，同乘人员能在显示器上确认车辆周边并对驾驶员进行辅助。此外，同乘人员下车时能在显示器上进行安全确认，不会给驾驶员带来烦恼。 [0029] 接着，对车载显示装置1的动作进行说明。图10是表示车载显示装置1的动作的流程图。图11是对搭载了车载显示装置1的车辆内外的状况进行说明的图，驾驶座坐了驾驶员21、后座的左侧坐了作为儿童的左后座同乘人员22、后座的右侧坐了作为大人的右后座同乘人员23。此外，在车辆左侧存在骑自行车的人(以下称为接近物体24)。在右后座同乘人员23向驾驶员21传达关于车辆左侧的接近物体24及障碍物的安全确认等的情况下，难以从右后座利用目视确认来传达状况。因此，右后座同乘人员23利用右后座显示器9-3来观察车辆周围的摄像头图像并进行驾驶辅助。 该状况下，图12示出右后座同乘人员23进行的右后座显示器9-3的画面操作与画面转移。 [0030] 若车辆的点火开关接通(IG-ON)，则车载显示装置1起动，图像处理控制部2a根据图10的流程图来控制各部。首先，图像处理控制部2a将初始画面显示的处理命令输出至图像合并处理部4，在显示器9-1～9-m中显示初始画面(步骤ST1)。如图12(a)所示，在右后座显示器9-3中显示对车辆周围进行拍摄而得到的摄像头图像、光盘图像、智能手机图像以作为初始画面。此时，图像合并处理部4对图像获取部3-1～3-n获取的摄像头图像、光盘图像、及智能手机图像进行合并，来生成初始画面用的图像数据，并从图像传输处理部5发送至图像接收部8-1～8-m。图像接收部8-1～8-m接收图像数据，显示于显示器9-1～9-m中。 [0031] 若图12(b)中右后座同乘人员23从初始画面中对光盘图像进行选择操作，则右后座显示器9-3接受该操作输入，并将操作信息发送给图像传输处理部5(步骤ST2“是”)。此处，为了便于理解右后座同乘人员23的操作，利用光标来呈现选择操作。图像处理控制部2a判定该操作信息的内容，命令图像合并处理部4生成光盘图像的图像数据(步骤ST3)。图像合并处理部4生成在图像获取部3-1获取的光盘图像上对“返回”按钮进行了图形绘制处理后的图像数据。图像接收部8-3经由图像传输处理部5接收该图像数据，并显示于右后座显示器9-3(步骤ST4)。另外，可以为了返回至初始画面而在画面上图形显示“返回”按钮，也可以利用开关、语音识别等。 [0032] 若点火开关断开，则图像处理控制部2a结束画面显示(步骤ST6“是”)。另一方面，若点火开关接通(步骤6“否”)，则返回至步骤ST2并确认是否输入了新的操作信息(步骤ST2)。若没有新的操作信息(步骤ST2“是”)，则图像处理控制部2a控制图像合并处理部4等，以继续当前画面(此处为光盘图像)的显示(步骤ST5)。 [0033] 在右后座同乘人员23观看光盘图像的过程中为了对驾驶员21进行驾驶辅助而进行车辆左方的接近物体24等的确认的情况下，首先，对重叠显示于右后座显示器9-3的光盘图像的“返回”按钮进行选择操作(图12(d))。图像处理控制部2a若接受初始画面选择的操作信息(步骤ST2“是”)，则向图像合并处理部4输出初始画面显示的处理命令(步骤ST3)，并如图12(e)所示那样，在右后座显示器9-3中显示初始画面(步骤ST4)。 [0034] 接着，右后座同乘人员23从初始画面中对左方图像进行选择操作(图12(f))。图像处理控制部2a若接受左方图像选择的操作信息(步骤ST2“是”)，则向图像合并处理部4输出左方图像显示的处理命令(步骤ST3)，并如图12(g)所示那样，在右后座显示器9-3中画面显示左方图像(步骤ST4)。此时，图像合并处理部4可以在从左方图像检测到接近物体24的情况下，以线框25包围接近物体24来进行强调、或绘制图标26来进行强调。右后座同乘人员23边观察右后座显示器9-3中显示的左方图像，边对驾驶员21进行引导、建议、是否有危险的通知等来对驾驶进行辅助。 [0035] 在希望获得更详细的信息(希望观看详细的图像)的情况下，右后座同乘人员23对右后座显示器9-3的画面进行图12(h)所示的触摸操作，选择以点R、S为顶点的关注区域。图像处理控制部2a若接受关注区域选择的操作信息(步骤ST2“是“)，则向图像合并处理部4输出放大关注区域的处理命令(步骤ST3)，并如图12(i)所示那样，在右后座显示器9-3中放大显示左方图像中的关注区域(步骤ST4)。由此，右后座同乘人员23能基于更详细的信息进行驾驶辅助。此外，在车辆周围存在障碍物或接近物体24的情况下在画面内进行强调显示，因此右后座同乘人员23能进行进一步避免危险的辅助。并且，在车辆周围存在类似障碍物或接近物体24的物体的情况下，右后座同乘人员23通过在右后座显示器9-3中放大显示左方图像上的该物体，从而能判断是否会成为行驶的障碍并传达给驾驶员21。 [0036] 此外，作为儿童的左后座同乘人员22要下车时，作为大人的右后座同乘人员23能将左方图像显示于右后座显示器9-3中以进行安全确认。并且，下车时车辆周边存在障碍物或接近物体24的情况下，车载显示装置1可以对车辆的门进行上锁，从而使得无法下车。具体而言，在图像合并处理部4根据拍摄车辆周围而得到的摄像头图像而检测到逐渐接近车辆的接近物体24的情况下，车辆控制指示部2b从图像合并处理部4获取该检测信息，将对检测到接近物体24一侧的门进行上锁的指示发送至车辆控制部10。若车辆控制部10通过车内网络从车辆控制指示部2b接收门上锁指示，则对所指示的门进行上锁。 [0037] 接着，对车载显示装置1的详细动作进行说明。这里，对图像输入数为4输入(n＝4)、图像输出为3输出(m＝3)的情况进行说明。图像获取部3-1获取光盘图像，图像获取部3-2获取导航图像，图像获取部3-3获取左后方摄像头 11-4的左后方图像，图像获取部3-4获取后方摄像头11-2的后方图像。为了简化说明，将各输入图像的分辨率和帧率分别设为720×480像素、30fps。 [0038] 图像接收部8-1向前座显示器9-1输出图像数据，图像接收部8-2向左后座显示器9-2输出图像数据，图像接收部8-3向右后座显示器9-3输出图像数据。将图像接收部8-1～ 8-3所连接的显示器的分辨率设为WVGA(800×480像素)。 [0039] 图像获取部3-1～3-4对所输入的图像进行A/D转换及格式转换等，并输出至图像合并处理部4。图像获取部3-1～3-4例如在所输入的图像是模拟信号的情况下，转换成数字信号。在亮度/色差(YUV/YCbCr系)格式的情况下，将颜色格式转换成RGB格式。另外，颜色转换及格式转换也可以由图像合并处理部4实施，而非图像获取部3-1～3- 4。 [0040] 图13表示用于进行图像合并处理部4的图像取得、图像合并处理的缓冲区的设定例。图像合并处理部4首先进行用于将图像获取部3-1～3-4输出的图像取得至存储器6a内的缓冲区设定。各缓冲区由双缓冲区(A缓冲区、B缓冲区)构成。图像合并处理部4利用双缓冲区(A缓冲区、B缓冲区)来构成光盘图像用缓冲区、以确保缓冲区区域(cap_0_A、cap_0_B)。同样地，确保导航图像用缓冲区(cap_1_A、cap_1_B)、左后方图像用缓冲区(cap_2_A、cap_2_B)、后方图像用缓冲区(cap_3_A、cap_3_B)。此时，对于各缓冲区大小，A缓冲区、B缓冲区均成为输入图像的分辨率×灰度数×图像输入数的大小。 [0041] 图像合并处理部4接着在存储器6a内进行图像合并处理及显示用的缓冲区的设定。这里，为了显示WVGA的3个画面，使A缓冲区、B缓冲区均成为输入图像的分辨率×灰度数×图像输入数的大小。图像合并处理部4将A缓冲区(dist_cell_0_A、dist_cell_1_A、dist_cell_2_A)、B缓冲区(dist_cell_0_B、dist_cell_1_B、dist_cell_2_B)设定作为图像合并处理·显示用的缓冲区。 [0042] 接着，图像合并处理部4将A缓冲区(cap_0_A)设定为光盘图像用缓冲区的图像取得用缓冲区，将B缓冲区(cap_0_B)设定为光盘图像用缓冲区的图像读取用缓冲区。图像合并处理部4作为输入图像的取得动作，首先判定缓冲区A是否处于取得光盘图像的动作过程中。若处于取得过程中，则不变更缓冲区，各缓冲区的设定也不进行变更。若取得完成，则将图像取得用缓冲区从A缓冲区切换成B缓冲区，将图像读取用缓冲区从B缓冲区切换成A缓冲区，并起动取得动作。起动取得动作后，若720×480像素的一个画面的图像取得结束则停止取得动作。之后，起动图像取得动作，反复进行取得一帧、取得动作停止的各处理。图像合并处理部4对导航图像、左后方图像、及后方图像进行同样的处理。 [0043] 接着，图像合并处理部4进行图像合并处理。图像合并处理部4使用位于各图像读取用缓冲区中的光盘图像、导航图像、左后方图像及后方图像，实施图像处理控制部2a指定的图像转换处理(放大、缩小、旋转、镜面转换等)及合成处理，并存储于图像合并处理·显示用缓冲区中。这里，左后方图像输入为720×480像素、图像显示输出为800×480像素，因此将横向宽度80像素设为黑色，进行等倍显示。或者，可以进行分辨率转换，作为横向较长的图像进行显示。此外，可以将4系统的输入图像上下左右地以瓷砖(tile)状排列显示(例如，图5(b)的左后座显示器9-2的显示画面)。在该情况下，800×480像素的画面尺寸的1/4为400×240像素，因此对各个输入图像进行从720×480像素到400×240像素的分辨率转换，将4系统的图像数据合并为瓷砖状。另外，如图5所示，合并画面能以任意的尺寸、任意的个数将各输入图像合并为一个画面。此外，图像合并处理部4在图像合并处理时各输入图像的取得还未完成的情况下，使用前一帧的数据来进行合并处理，在取得完成的情况下，使用取得完成的当前帧的数据来进行合并处理。 [0044] 此外，图像合并处理部4进行菜单画面生成、障碍物与接近物体的强调显示、图像加工等，具有用于与输入图像重叠的图形处理的功能。图形处理是指例如点绘制、线绘制、多边形绘制、矩形绘制、涂色、渐变、纹理映射、混合、抗锯齿、动画、字体、显示列表所形成的绘制、3D绘制等。 [0045] 此外，图像合并处理部4从输入图像内检测出接近物体及障碍物，基于检测结果并利用所述图形功能，将显示效果(强调显示、包围线、着色等)、图标、警告消息等重叠于接近物体及障碍物。 [0046] 图像合并处理部4在完成了一系列的图像合并处理后，等待显示用的垂直同步信号，将图像合并处理·显示用缓冲区从缓冲区A切换成缓冲区B。垂直同步部信号例如由图像处理控制部2a输出。若显示器的帧率为60fps，则垂直同步信号成为1/60秒一次的周期。图像合并处理部4在一帧期间内未完成图像合并处理的情况下，等待下一个垂直同步信号来切换缓冲区。 该情况下，图像更新的帧率成为30fps。 之后，从图像合并处理部4向图像传输处理部5输出显示于前座显示器9-1、左后座显示器9-2及右后座显示器9-3中的图像数据。 [0047] 图14是表示图像合并处理部4与图像传输处理部5的帧单位(垂直同步)及行单位(水平同步)下的动作的时序图，横轴表示时间。在图像合并处理部4使用A缓冲区来实施图像合并处理的期间，将B缓冲区的图像数据输出至图像传输处理部5。相反，在使用B缓冲区来实施图像合并处理的期间，将A缓冲区的图像数据输出至图像传输处理部5。这里，向3个显示器9-1～9-3进行显示，因此图像传输处理部5以水平行单位对3个图像数据进行多重化，并作为多重信号传输给图像接收部8-1～ 8-m。 [0048] 接着，对图像传输处理部5的动作进行说明。图像传输处理部5与图像接收部8-1～8-m的数据传输以双向进行。这里，将从图像传输处理部5到图像接收部8-1～8-m的传输称为下行传输，将从图像接收部8-1～8-m到图像传输处理部5的传输称为上行传输。下行传输时，图像传输处理部5对从图像合并处理部4接收到的各行单位的图像数据的多重信号进行数据分组，附加报头信息(分组报头)，并发送到图像接收部8-1～8-m。报头信息包含分组ID、行编号、数据发送目的地(图像接收部8-1～8-m的识别信息)、图像数据大小等。 [0049] 图像传输处理部5在上行传输中从图像接收部8-1～8-m接收报头与分组数据，获取图像接收部8-1～8-m的状态信息。报头信息包含分组ID、行编号、数据发送源(图像接收部8-1～8-m的识别信息)等。分组数据包含表示各图像接收部8-1～8-m的状态(通信状态、出错信息、显示器9-1～9-m的连接信息)的状态信息以及操作信息，而非图像数据。图像传输处理部5将接收·获取到的状态信息及操作信息存储于存储器6b。 [0050] 接着，对图像接收部8-1～8-m的动作进行说明。如图1那样以级联式连接的图像接收部8-1～8-m中，最上位的图像接收部8-1在下行传输中，从图像传输处理部5接收分组报头及分组数据，根据分组报头所包含的报头信息判定是否存在发送给自身的分组数据，仅接收发送给自身的分组数据，并将其中包含的图像数据显示于显示器9-1中。图像接收部8-1不接收发送给自身以外的分组数据，而是直接向连接在后级的图像接收部8-2发送分组报头及分组数据。此外，图像接收部8-1在上行传输中，将自身的状态信息及操作信息发送给图像传输处理部5。 [0051] 同样，图像接收部8-2也仅接收由上位侧的图像接收部8-1发送的分组数据中的发送给自身的分组数据，并将其中包含的图像数据显示于显示器9-2中，并且将自身的状态信息及操作信息经由图像接收部8-1发送给图像传输处理部5。之后，图像接收部8-3～8-m也进行同样的处理。 [0052] 如上所述，根据实施方式1，车载显示装置1包括：多个显示器9-1～9-m，该多个显示器9-1～9-m设置于车辆内；多个操作接受部(例如触摸面板)，该多个操作接受部与多个显示器9-1～9-m分别相对应；图像获取单元3，该图像获取单元3从拍摄车辆的周边的多个车外摄像头选择多个摄像头图像；图像处理控制部2a，在操作接受部接受到从多个摄像头图像中选择显示于显示器9-1～9-m的摄像头图像的乘坐人员的操作的情况下，该图像处理控制部2a指示图像处理命令，该图像处理命令用于生成显示在与该操作接受部相对应的显示器上的图像数据；以及图像合并处理部4，该图像合并处理部4对于多个显示器9-1～9-m，分别根据图像控制处理部2a的图像处理命令从多个摄像头图像中选择显示于该显示器的摄像头图像，并生成图像数据。因此，位于副驾驶座及后座的同乘人员能在设置于各个座位的显示器上自由地选择车辆周边的摄像头图像，并进行显示。由此，对于以驾驶新手、高龄者、本本族等不习惯驾驶的人为代表的驾驶员，同乘人员从车内的任意座位均能进行引导、建议、是否有危险的通知等驾驶辅助，能提供更为安全的驾驶环境。 [0053] 此外，根据实施方式1，在操作接受部(例如触摸面板)接受到对显示于显示器9-1～9-m的第一图像数据的一部分进行选择的乘坐人员的操作的情况下，图像处理控制部2a指示对该一部分进行放大的图像处理命令，图像合并处理部4对多个摄像头图像进行合成并生成第一图像数据(例如图8的合成后方图像)，根据图像处理命令，生成将第一图像数据的一部分放大后的第二图像数据。因此，能从多个摄像头图像的合成图像中选择同乘人员希望观看的关注区域，并进行全画面显示。此外，通过合成多个摄像头图像，能消除车外摄像头的死角。 [0054] 此外，根据实施方式1，如图8及图9所示，将所述第一图像数据的一部分放大后的第二图像数据至少包含两个以上的摄像头图像，由此，能显示多个同乘人员一次希望观看的图像。 [0055] 此外，根据实施方式1，图像合并处理部4利用多个摄像头图像检测接近车辆的接近物体24，并将警告该接近物体24的接近的信息重叠于图像数据，因此同乘人员易于发现接近车辆的物体(例如、其他车辆、摩托车、自行车、行人等)。 [0056] 此外，根据实施方式1，对警告物体的接近的信息进行强调显示，因此同乘人员能看着画面显示而直观地识别接近物体。另外，除了以线框包围接近物体的方法等以外，还可以采用利用文字进行警告的方法等作为强调显示。 [0057] 此外，根据实施方式1，在操作接受部(例如触摸面板)接受到对显示于显示器9-1～9-m的第一图像数据的一部分进行选择的乘坐人员的操作的情况下，图像处理控制部2a指示在显示器9-1～9-m的画面中央部对该一部分进行放大显示的图像处理命令，图像合并处理部4生成对多个摄像头图像进行了排列配置的第一图像数据(例如对图8的左方图像和合成后方图像进行了排列配置的合并画面)，根据图像处理命令，生成将第一图像数据的一部分放大并配置为显示于显示器的画面中央部的第二图像数据。因此，能通过用手指圈出、双击、捏放等简单的操作从多个摄像头图像的合并图像放大显示同乘人员希望观看的关注区域，能实现直观并易于理解的操作。此外，由于将选择的关注区域放大显示于画面中央部，因此，即使放大显示接近物体等，也不会从画面中消失。 [0059] 如上所述，本发明所涉及的车载显示装置根据同乘人员的操作变更显示于显示器的图像，因此适用于同乘人员利用显示器来进行车辆周边的安全确认并传达给驾驶员等的驾驶辅助。标号说明 [0060] 1车载显示装置、2CPU、2a图像处理控制部、2b车辆控制指示部、3图像获取单元、3-1～3-n图像获取部、4图像合并处理部、5图像传输处理部、6a、6b存储器、7内部总线、8-1～ 8-m图像接收部、9-1～9-m显示器、10车辆控制部、12总线、11-1～11-6摄像头、21驾驶员、22左后座同乘人员、23右后座同乘人员、24接近物体、25线框、26图标。 |
||||||
QQ群二维码
意见反馈
意见反馈