技术领域

本发明涉及电子照相机，特别涉及适用于例如便携式通信终端且 具有照相装置和处理器的电子照相机。

                        背景技术

在2001年8月24日申请公开的特开2001-231003号公报中公 开了一例现有的电子照相机。在该现有技术中，响应于快门按钮的操 作而拍摄的被拍摄体的图像信号临时存储在帧存储器之后，经YUV变 换或JPEG压缩等信号处理，记录在记录介质上。存储在帧存储器的 图像信号再经YUV变换或尖灭(thinning-out)处理，向监视器输出， 由此，拍摄的被拍摄体的静止图像(freeze image：冻结图像)显示 在监视器画面上。

但是，JPEG压缩是非可逆压缩，解压缩图像时会产生图像质量变 差。另一方面，监视器画面上显示的冻结图像不是经压缩处理和解压 缩处理的图像。因此，在现有技术中，不能根据冻结图像判断解压缩 图像产生的图像质量的变差，为了确认图像质量的变差，必须转移到 重放模式。即，在现有技术中，为了确认摄影图像的图像质量的变差， 需要进行复杂的操作。

                        发明内容

因此，本发明的主要目的在于提供一种电子照相机，能简单且迅 速地确认摄影图像的图像质量的变差。

若按照本发明，电子照相机具有照相装置和处理器，照相装置具 有基于摄影图像信号生成压缩图像信号的第1生成单元和基于由第1 生成单元生成的压缩图像信号生成解压缩图像信号的第2生成单元， 处理器具有响应于摄影指示来起动第1生成单元的第1起动单元、响 应于第1生成装置的生成处理的结束来起动第2生成单元的第2起动 单元和将由第2生成单元生成的解压缩图像信号输出给监视器的输出 单元。

在照相装置中，第1生成单元基于摄影图像信号生成压缩图像信 号，第2生成单元基于该压缩图像信号生成解压缩图像信号。处理器 响应于摄影指示，起动第1生成单元，并响应于第1生成单元的生成 处理的结束起动第2生成单元。处理器进而向监视器输出由第2生成 单元生成的解压缩图像信号。

即，若给出摄影指示，则基于摄影图像信号生成压缩图像信号， 压缩图像信号生成后，基于该压缩图像信号生成解压缩图像信号。向 监视器输出这样生成的解压缩图像信号。由此，可以简单且迅速地确 认解压缩图像的图像质量的变差。

处理器最好将由第1生成单元生成的压缩图像信号暂时保存在存 储器中，并响应于记录指示将该压缩图像信号记录在记录介质上。由 此，可以避免记录不想记录的图像质量不高的图像，提高操作性。

在第1生成单元中，在压缩装置按特定顺序压缩摄影图像信号的 情况下，照相装置最好具有已形成生成与被拍摄体的光学图像对应的 电荷的多个受光元件的图像传感器和按与特定顺序相关的顺序读出由 多个受光元件生成的电荷的读出单元。其结果是，不必在压缩之前在 存储器中存储摄影图像信号，可以削减存储器的容量。

最好是，压缩装置以第1像素块为单位进行压缩，读出单元以和 第1像素块相关的第2像素块为单位进行读出。进而最好是，照相装 置还包括配置在图像传感器的前面且具有多种色的色要素的滤色片和 对只具有多种色的某1种的色信息的电荷信号实施色分离的色分离单 元，第2像素块比第1像素块大，且相互邻接的2个第2像素块部分 重叠。再有，若图像传感器是CMOS型，则可以读出上述那样的电荷。

在第2生成单元中，在解压缩单元对压缩图像信号进行解压缩处 理且在分辨率降低单元降低由解压缩单元解压缩后的图像信号的分辨 率之后再生成上述解压缩图像信号的情况下，不需要临时存储解压缩 后的高分辨率的图像信号的存储器。

压缩单元最好以非可逆方式进行压缩。这时，解压缩图像的图像 质量会变差。

此外，摄影图像信号最好是静止图像信号。因静止图像的图像质 量变差比动态图像的图像质量变差更显眼，故当对静止图像信号进行 上述处理时，展现了更显著的效果。

通过参照附图进行下面的实施例的详细说明，就可以更加了解本 发明的上述目的及其他目的、特征和优点。

                        附图说明

图1是表示本发明的一个实施例的方框图。

图2是表示适用于图1的实施例中的便携式通信终端的一例构成 的方框图。

图3是表示适用于图2的实施例中的照相机单元的一例构成的方 框图。

图4是适用于图3的实施例中的滤色片的一例构成的图解图。

图5(A)是表示图3的实施例的一部分工作的图解图。

图5(B)是表示图3的实施例的一部分工作的图解图。

图6是表示适用于图2的实施例中的主CPU的一部分工作的流程 图。

图7是表示适用于图2的实施例中的主CPU的另一部分工作的流 程图。

图8是表示适用于图3的实施例中的照相机CPU的一部分工作的 流程图。

图9是表示适用于图3的实施例中的照相机CPU的另一部分工作 的流程图。

                        具体实施方式

参照图1，该实施例的移动通信系统包含便携式通信终端200和 进行无线通信的多个BS(Base Station：基站)100、100、…。BS100 与MLS(Mobile Local Switch：移动本地交换机)400连接，MLS400 经MGS(Mobile Gateway Switch：移动网间连接交换机)300与其他 MLS400连接。便携式通信终端200彼此之间的电话交谈、即声音数据 的通信通过BS100、MLS400和MGS300进行。

MLS400还经PPM(Packet Processing Module：分组处理模块)500 与干线网络600连接，服务器700连接在干线网络600上。服务器700 还与因特网800连接。

当从便携式通信终端200发送分组数据时，该分组数据经BS100、 MLS400、PPM500和干线网络600送给服务器700。若传送的分组数据 是其他便携式通信终端200的地址的邮件，则服务器700经干线网络 600、PPM500、MLS400、BS100向目的地址的便携式通信终端200发送 该分组数据。另一方面，当传送的分组数据是请求访问WEB站点800 时，服务器700经因特网800访问WEB站点900，将从访问目的地取 得的分组数据返送给请求源的便携式通信终端200。这时，分组数据 也经干线网络600、PPM500、MLS400、BS100传送至请求源的便携式 通信终端200。

便携式通信终端200具体地如图2所示那样构成。当利用操作键 36进行用于通话的呼出操作时，主CPU28通过信号处理电路16、无 线电路14和天线12向对方的便携式通信终端200发送呼出信号。与 此对应，当对方进行呼入操作时，便变成可通话的状态。

当在变成可通话状态之后声音进入话筒24时，该声音通过话筒24 变换成模拟信号的声音信号。变换后的声音信号经放大器26放大， 再经AD/DA变换电路18变换成数字信号的声音数据。变换后的声音 数据由信号处理电路16进行编码处理，进而，由无线电路14进行调 制处理。由无线电路14生成的调制声音数据从天线12发送出去。

另一方面，从对方发送来的调制声音数据被天线12接收，在由 无线电路14进行解调处理的同时，由信号处理电路16进行译码处理。 由信号处理电路16译码后的声音数据经AD/DA变换电路18变换成模 拟信号的声音信号，变换后的声音信号经放大器20放大后从扬声器22 输出。

这样一来，当在进行和对方之间的通话的过程中利用操作键36 进行通话结束操作时，主CPU28控制信号处理电路16和无线电路14， 向对方发送通话结束信号。在通话结束信号发送后，主CPU28结束通 话处理。当先从对方接收到通话结束信号时，主CPU28也结束通话处 理。

当在不进行通话的状态下利用操作键36使照相机功能有效时， 通过照相机单元34和主CPU28执行直通(through)图像输出处理。 首先，照相机单元34对被拍摄体进行拍摄，生成与拍摄了的被拍摄 体对应的低分辨率动态图像数据，并将生成的动态图像数据向主CPU28 输出。主CPU28将从照相机单元34输出动态图像数据转送给VRAM38。 利用LCD驱动器40读出VRAM38存储的动态图像数据，其结果是，被 拍摄体的实时动态图像(直通图像)在LCD42上显示。

当操作设在操作键36上的释放键36a时，通过照相机单元34和 主CPU28执行图像压缩/保存处理。首先，照相机单元34生成与操作 释放键36a的时刻的被拍摄体对应的高分辨率压缩静止图像数据，并 将生成的压缩静止图像数据向主CPU28输出。主CPU28将从照相机单 元34给出的压缩静止图像数据暂时保存在工作存储器34中。

若图像压缩/保存处理完毕，则执行解压缩图像输出处理。首先， 照相机单元34以JPEG方式对压缩静止图像数据进行解压缩，降低解 压缩静止图像数据的分辨率，并向主CPU28输出低分辨率的解压缩静 止图像数据。主CPU28将从照相机单元34输出的解压缩静止图像数 据写入VRAM38中。VRAM38存储的解压缩静止图像数据由LCD驱动器 40读出，其结果是，操作释放键36a的时刻的被拍摄体的静止图像 (freeze image)在LCD42上显示出来。

因JPEG方式是非可逆方式，故解压缩静止图像数据的图像质量 变差。结果，LCD42上显示的冻结图像也反映出该图像质量的变差。 操作者可以根据该显示的冻结图像简单且迅速地确认图像质量的变 差。

当LCD42显示冻结图像之后操作记录键36b时，通过主CPU28执 行记录处理。即，通过主CPU28将工作存储器34保存的压缩静止图 像数据记录在闪速存储器30中。在闪速存储器30中形成包含压缩静 止图像数据的数据文件。若记录完毕，则重新开始直通图像输出处理。

再有，当不操作记录键36b而操作取消键36c时，不经过压缩图 像数据的记录处理，而重新开始直通图像输出处理。

当邮件发送功能有效时，主CPU28向操作者提出输入目的地地址、 标题和消息以及选择来自闪速存储器30的任意压缩静止图像数据的 要求。当通过操作操作键36，输入目的地地址、标题和消息，且选择 任意的压缩静止图像数据时，主CPU28生成邮件，并通过信号处理电 路16、无线电路14和天线12发送该邮件。

再有，用来实现上述照相机功能的程序可以从因特网900上存在 的特定的WEB站点900下载。这时，下载的程序写入闪速存储器30 中。

照相机单元34的详细构成如图3所示。被拍摄体的光学图像经 光学透镜52和具有像图4那样的原色拜尔排列(Bayer pattern)的 滤色片54，入射到CMOS型的图像传感器56的受光面。形成滤色片54 的色要素与图像传感器56的受光面上形成的受光元件(像素)一一 对应，在各受光元件上生成只具有R、G、B中的某1种色信息的电荷。

在直通图像输出处理时，驱动器62响应于从TG(Timing Generator： 时序发生器)64输出的垂直同步信号，以光栅扫描方式驱动图像传感 器56。从图像传感器56一行一行输出由上述电荷形成的未处理图像 信号。传感器处理电路58对从图像传感器56输出的各帧未处理图像 信号实施CDS、AGC、A/D变换等处理，生成数字信号的未处理图像数 据，照相机信号处理电路60对生成的未处理图像数据实施白平衡调 整或色分离等处理，生成内插图像数据。形成内插图像数据的各像素 具有R、G、B的全部色信息。再有，传感器处理电路58和照相机信 号处理电路60响应于从TG64输出的时钟信号执行处理。

在直通图像输出处理时，开关SW1与端子S1连接，开关SW2与 端子S3连接。从照相机信号处理电路60输出的内插图像数据经开关 SW1加给尖灭电路70，进行分辨率降低处理。从尖灭电路70输出低分 辨率的内插图像数据，该内插图像数据经开关SW2加给存储器控制器 76。

在直通图像输出处理时，存储器控制器76响应于从TG64输出的 垂直同步信号，执行所谓存储体切换(bank switch)。即，存储器控 制器76在将由开关SW2加给的当前帧的内插图像数据写入第1帧存 储器78a时，从第2帧存储器78b读出前一帧的内插图像数据，在将 由开关SW2加给的当前帧的内插图像数据写入第2帧存储器78b时， 从第1帧存储器78a读出前一帧的内插图像数据。因此，不会在读出 地址和写入地址之间产生超越。由存储器控制器76读出的连续帧的 内插图像数据、即动态图像数据经I/F80输出给主CPU28。

在图像压缩/保存处理时，驱动器62用块扫描方式在1帧期间驱 动图像传感器56。由此，以由水平10像素×垂直10像素构成的像素 块为单位，从图像传感器56输出1帧未处理图像信号。这时，如图5 (A)所示，在相互邻接的像素块中产生2个像素的重叠。该重叠是 考虑到照相机信号处理电路60中的色分离处理。

从图像传感器56输出的未处理图像信号由传感器处理电路58变 换成未处理图像数据，从传感器处理电路58输出的未处理图像数据 由照相机信号处理电路60变换成内插图像数据。内插图像数据以图5 (B)所示那样的由8像素×8像素构成的像素块为单位从照相机信号 处理电路60输出。

在图像压缩/保存处理时，开关SW1与端子S2连接，开关SW2与 端子S4连接。此外，对图像压缩电路68付与压缩命令，对存储器控 制器76付与存储体固定命令。利用该存储体固定命令，将第1帧存 储器78a作为写入目的地和读出目的地指定。

从照相机信号处理电路60输出的各像素块的内插图像数据加给 色变换电路66。将内插图像数据的色形式从RGB形式变换成YUV形式。 变换后的内插图像数据以像素块为单位加给由压缩命令起动的图像压 缩电路68，进行像JPEG那样的非可逆方式的压缩处理。

压缩后的内插图像数据、即压缩静止图像数据经开关SW2加给存 储器控制器76，由此，写入第1帧存储器78a。因第1帧存储器78a 也可以作为读出目的地指定，故第1帧存储器78a存储的压缩静止图 像数据在其后由存储器控制器76读出。读出的压缩静止图像数据经 I/F80输出给主CPU28。

在解压缩图像输出处理时，对图像解压缩电路74付与解压缩命 令，对存储器控制器76付与设定变更命令。利用该设定变更命令， 将第1帧存储器78a作为读出目的地指定，将第2帧存储器78b作为 写入目的地指定。存储器控制器76从第1帧存储器78a读出压缩静 止图像数据，由解压缩命令起动的图像解压缩电路74对读出的压缩 静止图像数据实施JPEG解压缩。解压缩处理以像素块为单位执行， 解压缩后的各像素块的内插图像数据、即解压缩静止图像数据利用色 变换电路72实施从YUV形式到RGB形式的色变换。

开关SW1在该时刻与端子S2连接，从色变换电路72输出的解压 缩静止图像数据经开关SW1加给尖灭电路70。尖灭电路70对加给的 解压缩静止图像数据实施降分辨率处理，由此生成的低分辨率解压缩 静止图像数据经开关SW2向存储器控制器76输入。存储器控制器76 将输入的解压缩静止图像数据写入第2帧存储器78b。

当图像解压缩电路74完成1帧的解压缩处理时，对存储器控制 器76加设定变更命令。利用该命令，将第2帧存储器78b作为读出 目的地指定。存储器控制器76从第2帧存储器78b读出解压缩静止 图像数据，将读出的解压缩静止图像数据经I/F80输出给主CPU28。

当照相机功能有效时，主CPU28执行按图6和图7所示的流程图 的处理，照相机CPU78执行按图8和图9所示的流程图的处理。再有， 与图6和图7所示的流程图对应的控制程序存储在闪速存储器30中， 与图8和图9所示的流程图对应的控制程序存储在闪速存储器84中。

参照图6和图7，首先针对主CPU28的处理进行说明。在步骤S1 中执行规定的初始化处理。接着在步骤S3中，为了执行直通图像输 出处理，对照相机单元34设定动态图像模式。具体地说，对图3所 示的I/F80设定表示“动态图像模式”的模式信息。当从I/F80返回 对该模式设定的中断信号时，在步骤S5中判断为“是”，在步骤S7 中从I/F80取得1帧的内插图像数据。在步骤S9中，将取得的内插 图像数据转送给VRAM38。在步骤S11中判别有无释放键36a的操作， 若是“否”，则返回步骤S3。因此，只要不按压释放键36a，就可以 从I/F80取得连续的多帧的内插图像数据，并转送给VRAM38。

转送给VRAM38的多帧内插图像数据由LCD驱动器40依次读出。 其结果是，由多帧内插图像数据构成的动态图像、即被拍摄体的直通 图像在LCD42上显示。

若操作了释放键36a，则从步骤S11进入步骤S13。在步骤S13 中，为了执行图像压缩/保存处理，对I/F80设定图像压缩模式。当 从I/F80返回对该模式设定的中断信号时，在步骤S15中判断为“是”。 并且，在步骤S17中从I/F80取得压缩静止图像数据，在步骤S19中 将该压缩静止图像数据转送给工作存储器32。取得的压缩静止图像数 据是操作释放键36a时刻的被拍摄体的图像数据。通过步骤S19的处 理，将该压缩静止图像数据暂时存储在工作存储器32中。

当压缩静止图像数据保存结束时，为了执行解压缩图像输出处 理，在步骤S21中对I/F80设定图像解压缩模式。当从I/F80返回对 该模式设定的中断信号时，在步骤S23中判断为“是”。并且，在步 骤S25中从I/F80取得解压缩静止图像数据，在步骤S27中将该解压 缩静止图像数据转送给VRAM38。取得的解压缩静止图像数据是将上述 压缩静止图像数据解压缩且降低其分辨率的图像数据。利用步骤S27 的处理，该解压缩静止图像数据被写入VRAM38中。存储在VRAM38的 解压缩静止图像数据由LCD驱动器40读出。结果，响应于释放键36a 的操作，拍摄的被拍摄体的静止图像即冻结图像在LCD42上显示。

在步骤S29中判别有无记录键36b的操作，在步骤S31中，判别 有无取消键36c的操作。当操作了记录键36b时，则从步骤S29进入 步骤S33，以文件的形式将保存在工作存储器32中的压缩图像数据记 录在闪速存储器30中。该记录处理结束后，返回步骤S3。另一方面， 当操作了取消键36c时，在步骤S31中判断为“是”，且不经过记录 处理而返回步骤S3。其结果是，重新开始直通图像输出处理。

其次，参照图8和图9，针对照相机CPU82的处理进行说明。在 步骤S41中执行规定的初始化处理，在步骤S43中，从I/F80取得由 主CPU28设定的模式信息。在步骤S45中判别模式信息的内容是否表 示“动态图像模式”，在步骤S47中判别模式信息的内容是否表示“图 像压缩模式”。当在步骤S45判断为“是”时，进入应执行直通图像 输出处理的步骤S49，当在步骤S47判断为“是”时，进入应执行图 像压缩/保存处理的步骤S61。当在步骤S45和S47中都判断是“否” 时，则返回步骤S43。

在直通图像输出处理时，首先在步骤S49中使开关SW1和SW2与 端子S1和S3连接。由此，使尖灭电路70有效。在步骤S51中命令 驱动器62进行光栅扫描，在步骤S53中，命令存储器控制器76进行 存储体切换。在步骤S55中，判断是否从TG64输出了垂直同步信号， 若为“是”，则在步骤S57中经I/F80向主CPU28输出中断信号。当 在步骤S57中处理结束时，返回步骤S43。因此，只要对I/F80设定 活动图像模式，则反复进行步骤S49～S57的处理。

驱动器62响应来自TG64的垂直同步信号，以光栅扫描方式驱动 图像传感器54。基于该光栅扫描，从照相机信号处理电路58输出连 续的帧的内插图像数据。从照相机信号处理电路58输出的内插图像 数据在尖灭电路70中进行尖灭处理，从尖灭电路70输出的低分辨率 的内插图像数据由存储器控制器76写入第1帧存储器78a或第2帧 存储器78b。

因命令存储体切换，故存储器控制器76在第1帧存储器78a和 第2帧存储器78b之间，对每1帧切换写入目的地，在第2帧存储器 78b和第1帧存储器78a之间，对每1帧切换读出目的地。因此，各 帧的内插图像数据交替写入第1帧存储器78a和第2帧存储器78b， 并从第2帧存储器78b和第1帧存储器78a交替读出。读出的一连串 帧的内插图像数据经I/F80输出给主CPU28。

在图像压缩/保存处理时，首先在步骤S59中使开关SW1和SW2 分别与端子S2和S4连接，在步骤S61中，命令图像压缩电路68进 行压缩处理。在步骤S63中命令存储器控制器76进行存储体固定， 在步骤S65中命令驱动器62进行块扫描。

驱动器62在1帧期间以块扫描方式驱动图像传感器56。基于该 块扫描的1帧内插图像数据从照相机信号处理电路60输出。色变换 电路66对输出的内插图像数据实施色变换，在由压缩命令起动的图 像压缩电路68中实施JPEG压缩。由此，生成1帧的压缩静止图像数 据。生成的压缩静止图像数据由存储器控制器76写入第1帧存储器 78a，然后，由存储器控制器76从第1帧存储器78a中读出。读出的 压缩静止图像数据经I/F80输出给主CPU28。

在图9的步骤S67中，判断图像压缩电路68的1帧压缩处理是 否结束。这里，若判定为“是”则进入步骤S69，经I/F80向主CPU28 输出中断信号。当中断信号输出结束时，在步骤S71中从I/F80取得 模式信息，在步骤S73中判别该模式信息的内容。并且，若模式信息 表示“图像解压缩模式”，则在步骤S75之后执行解压缩图像输出处 理。

首先，在步骤S75中，命令图像解压缩电路74进行解压缩处理。 在步骤S77中命令存储器控制器76进行设定变更。利用该设定变更 命令，存储器控制器76将第1帧存储器78a作为读出目的地，将第2 帧存储器78b作为写入目的地。存储在第1帧存储器78a中的压缩静 止图像数据由存储器控制器76读出，在由解压缩命令起动的图像解 压缩电路74中进行JPEG解压缩。解压缩静止图像数据经色变换电路 72的色变换和尖灭电路70的尖灭，由存储器控制器76写入第2帧存 储器78b中。

在步骤S79中，判断图像解压缩电路74的解压缩处理是否结束。 这里若为“是”，则在步骤S81中命令存储器控制器76进行设定变更。 利用该设定变更命令，存储器控制器76将第2帧存储器78b作为读 出目的地。因此，第2帧存储器78b存储的低分辨率的解压缩静止图 像数据由存储器控制器76读出，并经I/F80输出给主CPU28。当步骤 S81的处理结束时，在步骤S83中经I/F80向主CPU28输出中断信号， 然后返回步骤S43。

由以上说明可知，便携式通信终端200具有照相机单元34和主 CPU28。在照相机单元34中，色变换电路66和图像压缩电路68的一 连串处理系统基于拍摄的被拍摄体的内插图像数据生成高分辨率的压 缩静止图像数据。此外，图像解压缩电路74、色变换电路72和尖灭 电路70的一连串处理系统基于高分辨率的压缩静止图像数据生成低 分辨率的解压缩静止图像数据。

这里，主CPU28在操作释放键36a时起动图像压缩电路68，在压 缩静止图像数据的生成结束时起动图像解压缩电路74。由图像解压缩 电路74的起动生成的低分辨率解压缩静止图像数据由主CPU28从照 相机单元34取得，并写入VRAM38中。该结果是，解压缩图像在LCD42 上显示。因此，可以简单而迅速地确认因像JPEG那样的非可逆方式 的压缩处理引起的解压缩图像的图像质量的变差。

此外，主CPU28将由图像压缩电路68生成的压缩静止图像数据 暂时保存在工作存储器32中，当操作记录键36b时，该压缩静止图 像数据记录在闪速存储器30中。这样，通过在向闪速存储器30记录 时请求记录键36b的操作，可以避免图像质量不高的不想记录的压缩 静止图像数据的记录。通过这一点来提高操作性能。

进而，因图像压缩电路68以像素块为单位执行压缩处理，故驱 动器62用块扫描方式驱动图像传感器56。因此，不必将从照相机信 号处理电路60输出的内插图像数据暂时存储在存储器中，可以削减 存储器容量。

再有，在该实施例中，使用便携式通信终端进行了说明，但本发 明可以适用于具有照相机功能的所有电子设备(最好是便携式电子设 备)。

此外，在该实施例中，考虑存储器容量的削减而使用CMOS型图 像传感器，但只要对存储器容量没有限制，也可以使用只能进行光栅 扫描的CCD型图像传感器。

虽然对本发明已进行详细说明和图示，但这只不过是一种图解和 一个例子，不应该理解为对本发明的限制，本发明的精神和范围只受 一同附上的权利要求书的限制。