运动图像专家组(MPEG)技术称作用于图像信号的编码技术，并 且在例如日本专利公开No.2002-199408和日本专利公开No. 9-163379中描述。
在MPEG编码技术中，图像信号被分类成要编码的I帧、P帧、 及B帧。对于I帧，使用仅在同一帧内的图像信号进行编码。对于P 帧，使用以前I帧或P帧的图像信号进行运动补偿预测编码。对于B 帧，使用以前I帧或P帧和以后I帧或P帧的图像信号进行运动补 偿预测编码。
为了使用有限传输速率的传输路径传输MPEG编码的图像信号或 者为了把MPEG编码的图像信号记录在记录介质中，最好每单位时间 的数据量(数据速率)保持恒定。用来保持数据速率恒定的模式称 作恒定位速率(CBR)模式。
在MPEG技术中，P帧和B帧使用其它帧的图像信号进行运动补 偿预测编码。因而，如果在屏幕中有很大变化，例如，如果新物体 突然出现在P帧的屏幕中，则预测误差增大。
而且，由于数据速率必须在CBR模式中保持恒定，所以如果预测 误差由于这样一种大运动而增大，则量化步骤的宽度必须增大，以 便减小数据的量。
因而，在包括大变化的一部分中的图像的质量，与其它帧相比被 降低。

即使很大变化出现在屏幕中时，本发明也能防止图像质量的降 低。
根据本发明的一个方面，图像处理设备包括：输入单元，用来输 入运动图像信号；抽取单元，用来抽取用于由输入单元输入的多个 帧的运动图像信号的一部分；编码单元，用来使用帧内编码和帧间 预测编码而编码由抽取单元抽取的运动图像信号的所述部分；及控 制单元，用来探测由输入单元输入的运动图像信号的所述部分外的 区域中的图像的运动，并且用来按照运动探测的结果控制使用由编 码单元进行的帧内编码来进行编码的时间。
由下面参照附图对实施例如下描述，本发明的其他特征和优点将 变得显而易见。

图1表示根据本发明的图像捕获设备的结构。
图2表示在本发明的实施例中使用的图像。
图3A至3C表明在实施例中用来探测运动的操作。
图4表示代码量的变化。
图5是流程图，表示在实施例中用来控制编码处理的过程。
图6是说明图，表示在实施例中代码量的变化。

图1是方块图，表示根据本发明实施例的图像捕获设备100的结 构。
根据这个实施例的图像捕获设备100，除拍摄运动图像的功能 外，具有拍摄静止图像的功能。
电荷耦合器件(CCD)101具有其数量适于拍摄静止图像的象素。
例如，尽管包括720+Y(水平方向)×480+X(垂直方向)的约 350,000个象素对于通过通常的美国国家电视系统委员会(NTSC)系 统得到运动图像就足够了，其中X和Y代表信号处理必需的几个象 素，但在这个实施例中提供具有包括1,600+Y(水平方向)×1,200+X (垂直方向)的约2,000,000个象素的CCD，以便拍摄静止图像。
信号处理单元102把从CCD 101输出的图像信号转换成数字信 号。在对图像信号进行其它的必要处理之后，信号处理单元102把 处理的图像信号输出到存储器103。存储器103存储用于从信号处理 单元102输出的多个帧的图像信号。切出单元104按照摄影模式从 在存储器103中存储的图像信号抽取一个切出区域，并且把切出区 域的图像信号输出到调整大小单元105。调整大小单元105根据摄影 模式把从切出单元104输出的图像信号的象素数量减小到适于记录 格式的象素数量，并且把处理的图像信号输出到编码单元106。
编码单元106按照来自控制单元110的指令按MPEG或联合图像 专家组(JPEG)格式对图像信号编码，并且把编码的图像信号输出 到记录单元107。记录单元107把编码的图像数据记录在记录介质 108中。例如，磁盘介质用作在这个实施例中的记录介质。
运动探测单元109从在存储器103中存储的用于多个帧的图像信 号探测在由切出单元104读出的切出区域与其它区域之间的运动向 量，并且把运动向量输出到控制单元110。
控制单元110按照来自操作单元111的指令在用于静止图像的摄 影模式与用于运动图像的摄影模式之间切换。在用于运动图像的摄 影模式中，控制单元110按照来自运动探测单元109的输出控制由 编码单元106进行的MPEG编码处理。
图2表示在这个实施例中使用的图像信号。
参照图2，从CCD 101读出的图像屏幕201由信号处理单元102 处理。由切出单元104抽取切出区域202。调整大小屏幕203具有的 图像尺寸在用于运动图像的摄影模式中由调整大小单元105减小。 能按希望设置调整大小屏幕203的尺寸。
根据图像捕获设备，在用于静止图像的摄影模式中，当从操作单 元111给出摄影指令时，控制单元110控制信号处理单元102，以存 储用于在存储器103中的帧的图像信号。而且，控制单元110控制 切出单元104和调整大小单元105以把在存储器103中存储的图像 信号的尺寸减小到指定尺寸，并且把处理的图像信号输出到编码单 元106。
在这个实施例中，在用于静止图像的摄影模式中，要拍摄的静止 图像的尺寸(象素数量)能被设置到在图2中表示的图像屏幕201 的尺寸内的希望尺寸。
编码单元106 JPEG对从调整大小单元105输出的图像信号编码， 并且把编码的图像信号输出到记录单元107。记录单元107把编码的 静止图像信号记录在记录介质108中。
将描述在用于运动图像的摄影模式中进行的处理。
当从操作单元111给出用来启动拍摄运动图像的指令时，控制单 元110控制信号处理单元102，以便对于每个帧把从CCD 101输出的 图像信号顺序写在存储器103中。在用于运动图像的摄影模式中， 图像信号的预定切出区域(象素的数量)202由切出单元104从在存 储器103中存储的在图2中表示的图像屏幕201抽取，并且输出到 调整大小单元105。在如上所述顺序处理图像信号之后，处理的图像 信号被输出到编码单元106。编码单元106对已处理的运动图像数据 编码，并且记录单元107把编码的运动图像数据记录在记录介质108 中。如上所述，在用于运动图像的摄影模式中，从CCD 101输出的 部分图像被抽取和记录。
在用于运动图像的摄影模式中，控制单元110按照由运动探测单 元109探测的输出控制编码单元106。
接着描述由控制单元110进行的控制操作。
图3A至3C表示在摄影场景中的图像。图3A、3B、及3C分别表 示在时刻Ta、Tb、及Tc的图像。
参照图3A至3C，图像屏幕301的尺寸等于从CCD 101输出的图 像的尺寸，如在图2中表示的图像屏幕201中那样。而且，记录区 域302代表在用于运动图像的摄影模式中由切出单元104抽取的区 域，如在图2中表示的切出区域202中那样。提供物体303和304。
在图3A表示的时刻Ta，物体303存在于记录区域302内。如图 3B和3C中所示，物体304随着从时刻Tb到时刻Tc的一段时间，在 时刻Tc时在记录区域302中运动。
图4表示当像在图3A至3C中表示的这样一种场景被MPEG编码 时的数据的量。
参照图4，I代表I帧，而P代表P帧。为了解释更简单起见， 表示其中没有B帧的例子。而且，帧号码被添加在用于帧号码的轴 线上，以便顺序代表帧。
这里，每五个帧插入I帧。
在帧类型下面表示时刻Ta、Tb、及Tc。用于每帧的数据量相对 地表示在数据量的轴线上。为了解释更简单起见，数据量被分类成 四级作为近似值。这里，较大数字代表较大量的数据。
在CBR模式中，控制数据量，从而数据的平均量是12/5。
由于在时刻Ta的帧1是I帧，I帧具有大量数据，级是4。然后， 由于帧2至5是P帧，P帧具有较小量数据，级是2。
由于在以前的I帧之后在时刻Tb的帧6是五个帧，所以帧6是 I帧，并且帧6的级是4。
尽管在时刻Tb的帧以后的帧7是P帧，但由于物体304在时刻 Tc运动到记录区域302内，所以在帧6与7之间的差增大。因而， 数据量的级是3。
帧8的数据量的级应该是2，因为在帧7与8之间有较小的差。 然而，由于是以前帧的帧7的级是3，所以如果帧8的级被设置到2， 则在预定时刻的平均数据量超过一个基准量。因而，帧8的数据量 的级不可避免地设置到1。然后，帧9和10的级是2。在帧11中， 插入I帧，并且数据量的级是4。因而，从帧6至10的平均数据量 是12/5。
如果如上述那样通过在预定时段处插入I帧进行编码，则当新物 体突然运动到屏幕中时，如图3C中所示，代码的量增大，并且图像 的质量降低。
在这个实施例中，在用于运动图像的摄影模式中，如图3B和3C 中所示，探测在记录区域302外的物体的运动，并且按照运动探测 的结果改变编码处理。
换句话说，在图1中表示的运动探测单元109从在存储单元103 中存储的用于两个连续帧的图像探测在记录区域302外的图像的运 动向量，并且把结果输出到控制单元110。
更具体地说，在图3B中表示的屏幕中，使用紧在前面的屏幕的 图像信号探测物体304的运动向量。在这种情况下，由于探测到物 体304向屏幕左方的运动，所以关于物体的位置的信息和探测的运 动向量输出到控制单元110。
如果例如按照来自运动探测单元109的输出在时刻Tb的帧是I 帧，则控制单元110控制编码单元106，以延迟用来插入I帧的时刻 并且把在时刻Tb的屏幕编码为P帧。
接下来参考图5所示的流程图描述当进行编码处理时由控制单 元110进行的处理。
当编码处理开始时，代表I帧的插入间隔的I_CNT设置到4，并 且代表用来计数被处理的帧数的变量的F_CNT设置到0(步骤S501)。 换句话说，当帧数量通过从0计数变成4时，插入I帧。然后，确 定F_CNT是否大于或等于I_CNT(步骤S502)。如果F_CNT大于或 等于I_CNT，即，如果F_CNT是4或更大，则确定在这种计时下应该 插入I帧。在步骤S503，按照来自运动探测单元109的输出确定用 来插入I帧的时刻是否应该延迟。
运动探测单元109探测在图3A至3C中表示的图像屏幕301中的 记录区域302外的图像的运动向量。假设在特定宏块内的物体以相 同速度运动，运动探测单元109预测物体运动到记录区域302内的 时刻。
当预测在记录区域302外的物体在与以后帧相对应的时刻运动 到记录区域302内时，输出一个延迟信号。
当没有从运动探测单元109输出延迟信号时，控制单元110控制 编码单元106以把帧编码为I帧(步骤S504)，并且把F_CNT设置 到0(步骤S505)。然后，过程返回到步骤S502。
如果在步骤S503从运动探测单元109输出用于I帧的延迟信号， 则编码单元106被控制成把帧编码为P帧(步骤S506)，并且把1 添加到F_CNT上(步骤S507)。然后，过程返回到步骤S502。
而且，如果在步骤S502中F_CNT没有达到I_CNT(4)，则确定 不是用来插入I帧的时刻，并且把帧编码为P帧(步骤S506)，及 把1添加到F_CNT上(步骤S507)。然后，过程返回到步骤S502。
图6表示当在图3A至3C中表示的场景被按上述那样编码时的数 据量。
由于在时刻Ta的帧1是具有大量数据的I帧，所以级是4。然 后，由于帧2至5是具有相对较小数据量的P帧，所以级是2。
尽管在时刻Tb的帧6应该是I帧，但由于帧6是在以前I帧之 后的五个帧，所以这里反映由运动探测单元109进行的探测结果。
这里，运动探测单元109对于在存储器103中存储的多个帧探测 在图像信号的记录区域302外的区域中的运动。尽管物体304位于 在图3B中的记录区域302外，但预测物体304在与以后帧相对应的 时刻运动到记录区域302内。
运动探测单元109把一个用来延迟I帧插入的延迟信号输出到控 制单元110。
控制单元110接收延迟信号，并且控制编码单元106，以延迟I 帧的插入。
因而，编码单元106把帧6编码为P帧而不编码为I帧。因而， 数据量的级是2。物体304在时刻Tc运动到屏幕内，并且在帧6与 7之间的图像差增大。然而，由于控制单元110预先接收到延迟信号， 所以控制单元110指令编码单元106把帧7编码为I帧。因而，帧7 的数据量的级是4。
计数以后的帧用于参照帧7插入I帧。
换句话说，帧8到11被编码为P帧。由于有来自相应以前帧的 很小图像差，所以数据量是2。对于帧12，如果没有图像运动到记 录区域302中，则不输出延迟信号，并且插入I帧。因而，数据量 是4。
在这种情况下，帧1至5的平均值和帧7至11的平均值的每一 个是12/5。然而，帧2至6的平均值是10/5，并且这落在希望的数 据率12/5以下。
尽管这没有严格地定义为CBR，但不需要增大在仅包括很小图像 变化的区域中的数据量。换句话说，不降低图像质量的数据量的减 小不会引起实际问题。
如上所述，根据这个实施例，当拍摄图像的部分被抽取、被编码 为运动图像、及记录时，探测在记录区域外的物体的运动。如果确 定新物体运动到记录区域内，则改变用来插入I帧的时刻。因而， 能防止归因于预测误差的增大的图像质量的降低。
尽管在上述实施例中描述了其中通过使用对于静止图像摄影比 对于运动图像摄影具有更多象素的CCD而拍摄和编码一个运动图像 信号的情形，但本发明不限于此。本发明也适用于装有比与记录区 域相对应的象素有更多象素的CCD的图像捕获设备，以便补偿在拍 摄运动图像时的模糊。
更具体地说，为了补偿模糊，例如，根据整个图像的运动向量运 动在图2中表示的图像的切出区域202。在这样一种布置中，预测来 自切出区域外的区域的物体的运动，并且改变用来插入I帧的时刻。 因而，能防止归因于代码量增大的图像质量的降低。
而且，尽管作为在上述实施例中的规则对于每五个帧插入I帧， 但当延迟I帧的插入时，该延迟引起与规则的偏差。此外，数据量 临时落到平均值以下。
这在上述实施例中不重要，然而，依据该系统可能出现不方便。
在这种情况下，即使延迟I帧的插入，下个I帧也可以被控制成 在用于插入的原始计划时刻被插入。
例如，在图6中，对于每五个帧：在帧1、帧6、及帧11中应该 原始插入I帧。在这种情况下，即使当延迟I帧在帧6中的插入时， 下个I帧也被插入在帧12中。
这种布置能与其中对于每五个帧插入I帧的布置相一致，并且与 恒定位速率的规则相一致。通过改变控制单元110的控制程序能进 行这种布置。
而且，用户能按希望改变在用于运动图像的摄影模式中要抽取的 图像的区域。
尽管参照当前认为是实施例的方案已经描述了本发明，但要理 解，本发明不限于公开的实施例。相反，本发明打算覆盖包括在所 附权利要求书的精神和范围内的各种修改和等效布置。如下权利要 求书的范围要符合最广义的解释，以便包容所有这样的修改和等效 结构与功能。