例如，在使用用于产品传单、广告、杂志文章的图像的印刷市场中， 以及在制作展会和会议材料、用于现场记录的照片、诸如房地产的商品 快照以及产品和工作安排的商业市场中，通常在预定区域中布置多个图 像，例如由数字照相机(数字静止照相机：DSC)拍摄或由扫描仪读取的 图像(图像数据、数字图像)，并输出(显示)经过编辑的编排图像。传 统地，例如，由摄影师拍摄待排版的多个图像并在对这些图像分别进行 调整的同时进行编辑，同时作为图像处理专家的用户检查各个图像的状 态。另一方面，近些年来，随着摄影设备(代表性的为数字照相机和移 动电话)的迅速发展和普及以及诸如因特网的网络技术的进步，将由普 通用户以分布式方式在不同拍摄条件下拍摄的多个图像放入数据库的情 况已经有很多。
在作为专利申请公开的现有技术中存在这样一种技术：通过为各个 图像生成矩形区域(该矩形区域限定了具有余边的附加图像)，并且根据 预定的排列规则排列这些矩形区域，从而在指定的区域中放置多个图像 (如，参见JP-A-2003-101749，3-5页和图1)。在另一公开的技术中， 为了以便于查看的多图像形式在屏幕上显示图像尺寸不确定的多个图像 数据，根据显示区域的垂直尺寸(或水平尺寸)与图像数据的垂直尺寸 (或水平尺寸)之间的比例来增大或减小读入图像的长宽比(如，参见 JP-A-2000-040142，4和5页，和图1)。在提出的另一技术中，获取其中 作为图像的密度、颜色、对比度等要素的色调经过优化的目标图像数 据，并设定参数以将作为修正目标的与输入灰度相对应的目标图像数据 的灰度调节为输出灰度(如，参见JP-A-2003-134341，第6和7页，和 图1)。
如果所有的多个图像都是在相同拍摄条件下拍摄的，则可以显示便 于查看的编排图像。然而，在由不同的人在不同拍摄条件下在不同环境 中拍摄多个图像的情况下，如果通过使用在JP-A-2003-101749和 JP-A-2000-040142中公开的技术来编排显示多个图像，则所得到的编排 图像不便于查看。如果在不同拍摄条件下(如，拍摄地点、时间、对象 位置、对象角度、照明、和所使用的照相机)拍摄多个商品的图像，由 于商品的大小、位置和倾度的轻微偏差，使编排显示的多个图像变得很 差。除了这些几何特征参数的差异之外，与图像质量(图像质量特性参 数)相关的诸如明度(brightness)、颜色、灰平衡和灰度表示的特征参 数也导致了较差的编排显示图像。有/无背景的差异也妨碍了多个图像之 间的对比和相互参照。传统上，手工地对每个图像进行图像质量修正。 然而，特别是在需要高速印刷编排图像的商业市场和印刷市场中，以及 例如在Web上获得编排图像的机会增加的情况下，当前的图像修正只依 赖手工工作的情况并不可取。
在JP-A-2003-134341中，获取其中将色调设为目标状态的目标数字 图像数据，并通过使用该目标图像数据作为样本来进行图像处理。然而， 关于优化的感觉因人而异，优化结果不见得使特定用户满意。具体地， 当一起显示并输出多个图像时，从整体平衡的角度讲，使用预定的目标 数字图像数据来确定所有图像的色调目标值可能并不合适。此外，虽然 文献JP-A-2003-13441说明了明度、对比度、色彩平衡、色调曲线和电 平修正是可调的，但是在将多个图像一起编排显示的情况下，只通过色 调调整不能获得便于查看的图像。
此外，在包含所引用的参照文献3的技术在内的传统图像处理技术 中，通过一装置来预先确定修正目标并预先设定各种参数的目标值。因 此难于针对该装置未知的目的来进行修正处理，例如针对各个用户的偏 好，或者难于按照未知的处理目标来进行图像质量修正。可以允许用户 随意设置处理目标。然而，以数值形式预先设定饱和度、明度等需要足 够的经验，并且很难将感觉印象与数值关联起来。即使由经验丰富的人 员来进行这种工作，处理结果也可能会不正确。

本发明旨在解决上述技术问题，因此本发明的一个目的是在同时输 出多个图像(图像数据)的情况下，自动修正各个图像从而提供优美的 编排图像等。
另一目的是按照未知的不具有预定目标值的处理目标在一装置中进 行图像处理。
另一目的是根据给予用户他/她所期望的感觉印象的图像(即，所选 的图像数据)来确定修正量。
另一目的是使得可以根据多个图像确定处理目标，从而按照更加正 确的目标获得修正结果。
根据本发明的第一方面，提供了一种图像处理装置，该图像处理装 置包括：特征参数识别单元，其从由用户选择的所选图像数据中识别出 所选图像数据的特征参数；和图像处理单元，其使用由特征参数识别单 元所识别的所选图像数据的特征参数作为一个目标值来对多个图像数据 分别进行图像处理。
根据本发明的第二方面，提供了一种图像处理装置，该图像处理装 置包括：显示单元，其以列表的形式显示多个图像数据；识别单元，其 识别由显示单元显示的多个图像数据中的一个或更多个以作为所选图像 数据；特征参数识别单元，其从由识别单元识别的所选图像数据中识别 出所选图像数据的特征参数；和设定单元，其把特征参数识别单元识别 的特征参数设定为对于待进行图像处理的图像数据进行图像修正处理的 一个目标值。
根据本发明的第三方面，提供了一种图像处理方法，该方法包括： 在用户终端上显示从存储单元读出的多个图像数据；识别由用户通过该 用户终端进行的选择，即从所显示的多个图像数据中选择图像数据作为 图像处理的目标图像数据的选择；提取所选图像数据的特征参数；根据 所提取的特征参数，设定对其它图像数据进行图像处理的目标值；以及 将该目标值存储在存储单元中。
附图说明
通过结合附图的详细说明，本发明的上述目的和优点将变得更为明 了，图中：
图1示出了根据一实施例的示例性图像处理系统的整体结构；
图2示出了根据该实施例进行统一编排处理的功能框图；
图3是主要由图像处理服务器的处理目标确定部执行的过程的流程 图；
图4示出了将多个样本图像显示给用户并使用户从中选择一个的第 一示例用户接口；
图5示出了将多个样本图像显示给用户并使用户从中选择一个的第 二示例用户接口；
图6示出了将多个样本图像显示给用户并使用户从中选择一个的第 三示例用户接口；
图7是几何特征参数的处理目标计算过程的流程图；
图8示出了处理目标计算的示例；
图9是图像质量特征参数的处理目标计算过程的流程图；
图10是几何特征参数的修正过程的流程图；
图11是图像质量特征参数(图像质量)的修正处理的流程图；
图12是根据所选的一个或多个图像的背景计算处理目标的过程以 及对多个图像进行修正的流程图；
图13示出了提取所选图像的特征参数的步骤；
图14示出了使用如图13所示计算出的所选图像特征参数对修正目 标图像所进行的处理；
图15示出了还未执行根据本实施例的统一编排处理的示例；和
图16示出了已经执行了根据本实施例的统一编排处理的示例。

下面结合附图详细说明本发明的一个实施例。
图1示出了根据本实施例的示例性图像处理系统的整体结构。在该 图像处理系统中，各个设备通过诸如因特网的网络9互相连接。图1的 图像处理系统配备有：图像处理服务器1，用于对以分布式方式拍摄的多 个图像进行统一编排处理；图像数据库服务器2，用于获取以分布式方式 拍摄的多个图像并选择要进行统一编排处理的图像；和一个或多个图像 数据库(图像DB)3，其与图像数据库服务器2相连并且存储以分布式方 式拍摄的多个图像。该图像处理系统还配备有各种用户终端，例如图像 传送装置5，用于读取由作为拍摄装置的数字照相机4所拍摄的多个图像， 并通过网络9将这些图像传送到图像数据库服务器2；显示装置6，用于 显示已经在图像处理服务器1中进行了统一编排处理的多个图像；和打 印图像处理装置8，用于执行各种必要的图像处理以使得作为图像打印输 出装置的打印机7输出已在图像处理服务器1中进行了统一编排处理的 多个图像。图像传送装置5、显示装置6和打印图像处理装置8分别可以 是计算机，例如笔记本计算机(笔记本PC)或者台式PC。图像处理服务 器1和图像数据库服务器2分别可以由各种计算机(诸如PC)中的一种 来实现。在本实施例中，对于以分布式方式在不同地点和不同拍摄条件 下拍摄的多个图像一起进行统一化。因此，提供了多个数字照相机4，并 且将与各个数字照相机4相连的多个图像传送装置5连接到网络9上。
例如，图像处理服务器1和图像数据库服务器2、以及作为PC的图 像传送5、显示装置6和打印图像处理装置8等各配备有：CPU(中央处 理器)，用于控制整个装置并进行计算；ROM，其中存储有对装置进行操 作所用的程序；RAM(如，DRAM(动态随机访问存储器))，其为作为CPU 的工作存储器的内部存储器；和I/O电路，其与接收来自用户的输入的 输入设备(键盘、鼠标等)相连，并与诸如打印机和监视器的输出设备 相连，并对这些外围设备的输入和输出进行管理。上述各个设备还配备 有：作为工作存储器的VRAM(视频RAM)等，向其写入要输出到用于监 控的输出设备的样本图像等；以及HDD(硬盘驱动器)和作为各种存储设 备(如DVD(数字通用光碟)设备和CD(光盘)设备)中的一种的外部 存储设备。图像数据库3可以为这种外部存储设备。
现在，为了便于理解，将根据本实施例的统一编排处理与传统的编 排处理进行比较。
图15表示还未执行根据本实施例(下文将要描述)的统一编排处理 的示例。在图15所示的栏(a)中，摄影A、摄影B和摄影C产生不同环 境中的多个图像，将这些图像从图像传送装置5传送到图像数据库服务 器2并存储在作为一个或多个存储器的图像DB 3中。例如，在摄影A的 资料中，对主对象进行拍摄使其成为较大图案并在充足的高亮度下进行 拍摄以产生具有较高明度的图像。在摄影B的资料中，对主对象进行拍 摄使其成为小图案并且图像的明度不高。此外，主对象偏离了中心，因 此该版面不是优选地。在摄影C的资料中，对主对象进行拍摄使其成为 具有合适大小的图案但是亮度很弱从而产生昏暗的图像。如果不进行任 何处理来布置在这些不同拍摄条件下拍摄的图像，则结果如图15中的栏 (b)所示。与主对象相对应的图案尺寸发生较大程度的变化并且它们在 各个图像中的位置是不固定的。此外，图像质量(即，明度、色彩表现 等)变化也很大，因此所得资料的质量很低。
图16表示已经执行了根据本实施例的统一编排处理的示例。如果对 在不同环境中拍摄的并且因此如图15的栏(a)所示具有不同图像质量 和不同对象几何特征的图像进行统一编排处理，则通过选择给予用户他 或她所期望的感觉印象的图像，可以自动获取如图16中的栏(b)所示 的统一资料。为了获得该资料，需要用户从图16的栏(a)的多个图像 中指定一个他想要在统一化这些图像中参照的图像(目标图像，所选图 像)。可以指定一个图像或者多个图像。从所指定的图像中提取出主对象 的几何特征参数和/或图像处理的特征参数，并根据所提取的特征参数设 定标准。当选择多个图像时，例如通过对所选图像的特征参数进行统计 处理来设定标准。按照这样设定的标准来修正各个图像。在本实施例中， 对图像进行修正以使得在多个图像中，不仅主对象的明度值得到统一， 而且背景也得到统一。更具体地，首先从所选图像中提取出诸如尺寸和 位置的几何特征参数，然后提取出与诸如图像明度和色彩表现的图像质 量相关的特征参数。根据特定条件下的特征参数设定标准，并通过修正 这些图像来产生统一化的编排图像以使这些图像满足这些标准。结果， 可以获得图16中的栏(b)所示的商品一览表那样的优美的编排图像， 其中各个组成图像在大小、位置、背景和明度方面都得到了统一。
图2表示用于执行根据图16示例出的实施例的统一编排处理的功能 框图。主要执行统一编排处理的图像处理服务器1配备有：图像输入单 元11，用于从图像数据库服务器2获得存储在图像数据库3中的图像数 据(数字图像)；序号分配/总数计数处理单元，用于进行预处理，比如 为通过图像输入单元11输入的多个图像分配图像序号Gn，并对总数进行 计数；和图像输出单元13，用于将经过图像处理的图像分别地或以编排 状态发送到网络9。图像处理服务器1还配备有：处理目标确定部20， 用于根据已经由序号分配/总数计数处理单元12处理过的图像计算处理 目标；修正量计算部30，用于对通过图像输入单元11输入并在序号分配 /总数计数处理单元12中进行了分配图像序号Gn和总数计数这些预处理 的各个图像的特征参数进行分析，并根据处理目标确定部20的输出计算 图像修正量；和图像处理部40，用于根据修正量计算部30计算出的单个 图像的修正量进行各种图像处理。
通过修正量计算部30，可以对待进行实际图像处理的各个图像状态 进行分析，并逐个图像地修正与所确定的处理目标之间的差距。然而， 也可以有不包含修正量计算部30的结构。在这种情况下，按照由处理目 标确定单元20确定的处理目标统一地进行所确定的处理，而不考虑各个 图像的状态。根据处理的内容，可以在这两种处理方法之间进行切换。 例如，在实现相同背景的处理的情况下，通过多数决定、求平均值等进 行判定从而由多个所选图像确定处理目标，并且不考虑各个图像状态而 进行统一处理。另一方面，为了使多个图像的明度级别等于它们的平均 值，优选地通过修正量计算部30分析各个图像状态并且随后按照处理目 标修正差别。
此处，将分别对上面的功能进行详细描述。处理目标确定部20配备 有：样本图像提供单元21，用于例如通过网络9向显示装置6的用户提 供多个样本图像，以使用户可以选择与该用户所想象的图像相近的图像； 和所选图像确定单元22，用于接收用户从样本图像提供单元21提供的多 个样本图像中选择目标图像(所选图像)的选择。处理目标确定部20还 配备有：特征参数提取单元23，用于提取目标图像的特征参数；基准特 征参数分析单元24，用于对所提取的特征参数进行分析；和目标值设定/ 存储单元25，用于根据所确定的图像计算处理目标，根据计算出的处理 目标设定目标值，并在存储器(未示出)中存储所设定的值。
修正量计算部30配备有：图像特征参数提取单元31，用于提取待 进行修正处理的图像(即，修正对象图像)的特征参数，诸如几何特征 参数和/或图像质量特征参数；图像特征参数分析单元32，用于对由图像 特征参数提取单元31所提取的特征参数进行分析；和图像修正量计算单 元33，用于根据由图像特征参数分析单元32分析的特征参数和由目标值 设定/存储单元25计算出的目标值来计算图像的修正量。图像处理部40 配备有：几何特征参数修正单元41，用于修正所识别的主对象的特征参 数，诸如位置、大小和倾度；图像质量修正单元42，用于对诸如明度、 颜色、灰平衡、或灰度的图像质量进行修正；和背景处理单元43，用于 进行诸如背景去除或背景统一化的背景修正。
例如，图像质量修正单元42具有下面的功能：用于噪声抑制的平滑； 根据例如修正对象图像在图像分布中是处于亮侧还是暗侧来移动基准点 的明度修正；在图像分布中调整亮部分和暗部分的分布特性的明度/对比 度修正；以及通过从明/暗分布直方图中获取分布状态以修正明度/对比 度的明度/对比度修正。例如，图像质量修正单元42还具有下面的功能： 将最亮的白色区域作为参照对白色部分的颜色偏差进行修正的色调/色 彩平衡修正；使具有较低饱和度的图像更鲜艳并降低接近灰色的图像的 饱和度的饱和度修正；以及与特定存储颜色相关的存储颜色修正，例如 使肤色更接近作为参照颜色的存储颜色。图像质量修正单元42还可以具 有提高清晰度的功能，例如，根据整个图像的边缘层次(edge level) 判断边缘清晰度(edge intensity)并将图像修正得更清晰。
接下来，对由图2所示的各个功能块进行的处理进行说明。
图3是主要由图像处理服务器1的处理目标确定单元执行的处理的 流程图。首先，例如，图像输入单元11通过网络9从图像数据库服务器 2接收多个图像(图像数据，数字图像)(步骤101)。序号分配/总数计 数处理单元12向输入图像分配图像序号Gn并对图像的总数N进行计数 (步骤102)。由此输入并分配了序号的图像可以是各种用户终端(诸如 显示装置6和打印图像处理装置8)的用户指定为他或她想要修正的图像。
处理目标确定部20的样本图像提供单元21向诸如显示装置6或打 印图像处理装置8的用户终端提供样本图像(步骤103)。例如，根据多 种图像格式(以下将要描述)中的任意格式来显示样本图像，并且用户 终端使用浏览器显示这些图像。优选地，显示样本图像的方法是，例如， 以缩小的形式布置多个图像以使用户可以进行比较和选择。用户终端可 以添加引导信息以帮助用户选择目标图像数据。引导信息的示例为：文 本显示、重点显示和选择按钮。所选图像确定单元22从用户终端接受选 择一图像的决定(步骤104)。可以决定将一个或者多个图像作为所选图 像。
在决定所选图像之后，判定基于所选图像的处理目标的计算是否是 用于几何变化(步骤105)。例如，根据是/否存在来自用户终端的指示来 进行此判定。几何变化为例如布局变化，布局变化的例子有余边调整和 诸如放大/缩小的尺寸调整。如果没有指定几何变化，则过程进行到步骤 109。如果要计算几何变化的处理目标，则从所选图像中提取几何特征参 数(步骤106)。对所提取的几何特征参数进行分析(步骤107)并设定 几何特征参数的修正目标值，并将这些修正目标值存入诸如DRAM的存储 器中(步骤108)。当确定了多个所选图像时，例如通过对所计算的几何 特征参数取平均值来设定各个修正目标值。
然后，确定是否要进行图像质量修正(步骤109)。例如，根据是/ 否存在来自用户终端的指示来进行此判定。图像质量修正的一个示例是 通过参照所选图像来修正明度、鲜艳度、对比度、色调等。如果不必进 行图像质量修正，则处理目标计算过程结束。如果有必要进行图像质量 修正，则从步骤104中确定的所选图像中提取出与图像质量相关的特征 (步骤110)并对这些特征进行分析(步骤111)。然后，设定图像质量 修正目标值并将这些目标值存储在诸如DRAM的存储器中(步骤112)。随 后处理结束。当确定了多个所选图像时，例如通过对所提取的图像质量 特征取平均值来设定各个修正目标值。
接下来，参照图4-6对步骤103中提供的示例性样本图像和步骤104 中确定所选图像的方式进行说明。在图5和6中，“参照图像”一词与“所 选图像”的意思相同。
图4示出了将多个样本图像显示给用户并使用户从中选择一个的第 一示例用户接口。将图4中所示的图像信息显示在计算机(用户终端) 的显示设备上，例如图1中所示的显示装置6或打印图像处理装置8。在 本示例中，显示了九个图像作为待选择的样本图像。除了此九个实际图 像外，还显示了诸如“选择与你所想象的图像接近的图像”的消息以及 诸如对各个图像的解释的“夕照”、“夏日海洋”、“雪景”和“家庭快照” 的引导信息。为了增加用户的选择，优选地提供具有很大差别的不同特 征的多个图像作为样本图像。如果用户根据引导信息，通过使用诸如鼠 标的输入设备选择了与他或她所想象的图像接近的图像，则如图4所示 用诸如粗框的着重显示包围所选图像。通过按下选择按钮使该选择生效。 通过网络9将所选图像的信息发送到图像处理服务器1的所选图像确定 单元22。
在图4的示例中提供了多个样本图像以供选择，图5示出了第二示 例用户接口，其中用户发出指令来登记样本图像。如果用户将一个或多 个图像，例如DSC004、DSC002、和DSC001，放入具有“在此处放入参照 图像”消息的区域并选择例如修正项“明度参照”，则该选择意味着要参 照这三个图像的明度的平均值。类似地，可以选择参照平均鲜艳度或平 均版面。如果在进行了参照图像和参照项的选择之后按下“进行修正” 按钮，则通过网络9将结果发送到图像处理服务器1的所选图像识别单 元22。虽然在本实施例中待修正的图像(即，修正对象图像)和参照图 像都是从同一组图像中指定的，但是参照图像不必为待修正的图像的一 部分(即，修正对象图像)，也可以选择其它图像作为样本图像。
然后，图2中所示的处理目标确定部20提取与各个参照项相对应的 特征参数，并根据由此确定的所选图像设定目标值。修正量计算部30提 取各个图像DSC001到DSC004的特征参数，并根据由处理目标确定部20 设定的目标值计算图像修正量。在图像处理部40中，由图像修正单元42 (对于明度和鲜艳度)和几何特征参数修正单元41(对于版面)对各个 图像DSC001到DSC004进行图像处理。将处理结果通过网络9从图像输 出单元13发送到显示装置6、打印图像处理装置8等并在这些装置上输 出。例如，图5的右下部示出了输出修正结果。例如，对图像DSC002和 DSC003进行了修正以使得它们整体上更亮并且主对象的位置变到了中 间。按下“存储”键将经过修正的图像存储在诸如HDD的存储装置中。 按下“打印”键，由例如打印机7打印这些经过修正的图像。
图6示出了第三示例用户接口，该接口将多个样本图像显示给用户 并使用户从中选择一个或一些图像。和图5的示例一样，例如，通过样 本图像提供单元21将四个图像DSC001到DSC004以及指令“选择您想要 修正的图像”显示在显示装置6的显示器上。在图6的示例中，对于各 个特性参数使用多个不同的图像组作为样本图像组。可以选择多个样本 图像作为各组样本图像。例如，如果用户将例如图像DSC004和DSC001 放入图5中所示的具有“在此处放入参照图像”消息(由于空间有限在 图6中未示出)的区域中并选择例如“明度参照”修正项，则选择图像 DSC004和DSC001作为明度参照图像。类似地，选择鲜艳度参照图像、对 比度参照图像、清晰度参照图像和版面参照图像。如果在为各个特征参 数选择了参照图像组之后按下“进行修正”按钮，则通过网络9将结果 发送到图像处理服务器1的所选图像确定单元22。
然后，图2所示的处理目标确定部20从针对各个特征参数确定的所 选图像中提取与各个参照项相对应的特征参数，并设定目标值。基准特 征参数分析单元24计算例如特征参数的平均值，并且目标值设定/存储 单元25为各个特征参数设定目标值。修正量计算部30使用所设定的目 标值为各个图像DSC001到DSC004计算图像修正量。图像处理部40对各 个图像DSC001到DSC004进行图像处理。将处理结果通过网络9从图像 输出单元13发送到显示装置6、打印图像处理装置8等并在这些装置上 输出。例如，在图6的右下部分中示出了输出修正结果。按下“存储” 键，将经过修正的图像存储在诸如HDD的存储装置中。按下“打印”键， 由例如打印机7打印这些经过修正的图像。
接下来，将针对各个几何特征参数和图像质量特征参数详细说明从 所选图像(目标图像)中提取特征参数并设定目标值的操作(图3中的 步骤106-108和110-112)。
图7是几何特征参数的处理目标计算过程(对应于图3中的步骤106 -108)的流程图。首先在图像处理服务器1的特征参数提取单元23中， 读出所选图像(所选图像数据)(步骤201)并识别主对象(步骤202)。 在提取了所识别的主对象(简称为“对象”)的轮廓(步骤203)之后， 提取对象的外切矩形(步骤204)。在以这种方式提取了几何特征参数之 后，对它们进行分析。即，计算对象的外切起始位置(步骤205)并计算 对象的大小(步骤206)。然后，计算对象的重心(步骤207)。
图8示出了上述步骤201-207的细节(图3中的步骤106和107)。 针对其中确定了三个所选图像(即，图像图案1到图像图案3)的示例说 明处理目标计算处理。在图8中，栏(a)表示对象的识别，栏(b)表 示轮廓的提取，栏(c)表示对象的外切矩形的提取和矩形信息的计算。 首先，如图8的栏(a)所示，通过将主对象与背景分离来而识别主对象。 然后，提取图像图案1到图像图案3的轮廓，由此如图8(b)所示获取 例如实的白色图案。如图8的栏(c)所示由所提取的轮廓提取对象的外 切矩形。对于各个图像，根据所提取的外切矩形计算对象的外切起始位 置(如，(Xs1，Ys1)，(Xs2，Ys2)和(Xs3，Ys3))、对象的大小(如， (Xd1，Yd1)，(Xd2，Yd2)和(Xd3，Yd3))和对象的重心(如，(Xg1， Yg1)，(Xg2，Yg2)和(Xg3，Yg3))。
下面继续说明图7的流程图。在执行了步骤201-207之后，确定是 否存在多个所选图像(步骤208)。如果只存在一个所选图像，则处理进 行到步骤209。如果在图8的示例中存在多个所选图像，则处理进行到步 骤212。如果只存在一个所选图像，则处理进行到图3中的步骤108(即， 目标值的设定和存储)。即，设定外切起始位置的目标值(步骤209)，设 定大小的目标值(步骤210)，并设定重心的目标值(步骤211)。将由此 设定的目标值存储在预定的存储器中并完成对于几何特征参数的处理目 标计算处理。
如果在步骤208中确定存在多个所选图像，则确定是否已经对所有 的所选图像进行了特征参数的提取和分析(即步骤201-207)(步骤212)。 如果还没有计算所有的重心，则处理返回到步骤201以再次执行步骤201 -207。如果已经计算了所有的重心，则执行步骤213-215(即，计算平 均值)。更具体地，在图8(a)-8(c)的示例中，在步骤S213中，以 XsM＝(Xs1，Xs2，Xs3)的平均值和YsM＝(Ys1，Ys2，Ys3)的平均值 来计算外切起始位置的平均坐标(XsM，YsM)。在步骤214中，以XdM＝ (Xd1，Xd2，Xd3)的平均值和YdM＝(Yd1，Yd2，Yd3)的平均值来计算 大小的平均值。在步骤215中，以XgM＝(Xg1，Xg2，Xg3)的平均值和 YgM＝(Yg1，Yg2，Yg3)的平均值来重心的平均坐标(XgM，YgM)。在确 定了多个所选图像的情况下以上面的方式计算出处理目标之后，执行上 述步骤209-211，并完成对于几何特征参数的处理目标计算处理。
另选地，可以根据用户的指令确定几何特征参数的目标值。例如， 可以通过在显示设备上显示下面的多个选项来确定目标值：
将对象的重心置于中心处；
采用最大对象的值；
采用最小对象的值；以及
对大小和位置取平均，
并使用户指定上述这些项中的一项。图7中所示的设定目标值的方 法为：当存在多个所选图像时，自动地计算平均值作为目标值。如果用 户规定了目标值设定方法，则目标值设定/存储单元25可以根据用户的 指令改变目标值设定方法并在存储器中存储结果目标值。作为另一选择， 可以在实际的修正处理中设定目标值。
接下来，对图像质量特征参数的处理目标的计算(与图3中的步骤 110-112相对应)进行说明。
图9是图像质量特征参数的处理目标计算过程的流程图。首先，图 像处理服务器1的特征参数提取单元23读出所选图像(步骤301)。然后， 对于亮度(luminance)、R(红)、G(绿)、B(蓝)和饱和度中的每一个 设定目标值。首先，进行亮度转换，即转换为例如L*a*b*(步骤302)， 并获取亮度直方图(步骤303)。然后，计算分布平均值L_ave(步骤304)， 并通过累加计算出的平均值L_ave来获取L_target(步骤305)。该亮度 转换用于明/暗修正或者明度/对比度修正。例如，在明度/对比度修正中， 从参照图像中获取亮/暗分布(如，直方图)，并将近似提供相同分布曲 线的值作为目标值(例如，大约设定五个范围)。
另一方面，例如，执行RGB转换以进行色调/色彩平衡修正(步骤 306)。首先对于从背景中分离出的主对象获取RGB直方图(步骤307)。 计算R分布最大值r_max(步骤308)，计算G分布最大值g_max(步骤 309)，并计算B分布最大值b_max(步骤310)。通过将所计算出的多个 最大值r_max累加而获取值Rmax_target(步骤311)，通过将所计算出 的多个最大值g_max累加而获取值Gmax_target(步骤312)，并通过将 所计算出的多个最大值b_max累加而获取值Bmax_target(步骤313)。 在执行色调/色彩平衡修正中，以这种方式分别获取RGB直方图。例如， 将对应于最亮的RGB直方图范围的点确定为白色。如果存在黄移或蓝移 (vellowish or greenish shift)，则可以确定发生了白色偏差，并且 进行白平衡修正。
此外，执行饱和度转换以进行饱和度修正(图314)。首先，对于已 从背景中分离出的主对象获取饱和度直方图(步骤315)，并计算多个分 布平均值S_ave(步骤316)。通过将计算出的多个分布平均值S_ave累 加而计算出值S_target(步骤317)。可以使用L*a*b*中的两个平面(a*b*) 来表示饱和度。灰色对应于a*b*为00。修正规则如下。在接近灰色的 范围中收缩饱和度，即修正颜色黯淡的部分以降低饱和度，即，使其更 接近于灰色。对中或高饱和度部分进行修正以提高鲜艳度。在步骤314 -317中，根据所选图像的分布平均值确定饱和度修正的目标值。
在执行了步骤301-317之后，确定是否存在多个所选图像(步骤 318)。如果只存在一个所选图像，则处理进行到由目标值设定/存储单元 25执行的目标值设定步骤(即，步骤325-329)。将计算出的值L_target 设为明度修正目标值(步骤325)，将S_target设为饱和度修正目标值(步 骤S326)，将Rmax_target设为色彩平衡(CB)修正目标值(步骤327)， 将Gmax_target设为另一色彩平衡(CB)修正目标值(步骤328)，并将 Bmax_target设为又一色彩平衡(CB)修正目标值(步骤329)。将这些 修正目标值存储在预定存储器(未示出)中并完成计算图像质量处理目 标的处理。
如果在步骤318确定存在多个所选图像，则确定是否已经对所有的 所选图像进行了分析(步骤319)。如果还没有对所有的所选图像进行分 析，则处理返回到步骤301以再次执行步骤301-317。如果已经对所有 的所选图像进行了分析，则基准特征参数分析单元24通过把这多个(N) 所选图像的计算结果之和除以N来计算平均值。即，通过把各个图像的 值L_target之和除以N来计算平均值(步骤320)，并且通过把各个图像 的值S_target之和除以N来计算平均值(步骤321)。类似地，计算值 Rmax_target的平均值(步骤322)，计算值Gmax_target的平均值(步 骤323)，并计算值Bmax_target的平均值(步骤324)。目标值设定/存 储单元25将平均值L_target设为明度修正目标值(步骤325)，将平均 值S_target设为饱和度修正目标值(步骤326)，将平均值Rmax_target 设为色彩平衡(CB)修正目标值(步骤327)，将平均值Gmax_target设 为另一色彩平衡(CB)修正目标值(步骤328)，并将平均值Bmax_target 设为又一色彩平衡(CB)修正目标值(步骤329)。目标值设定/存储单元 25将这些修正目标值存储在预定存储器(未示出)中并完成计算图像质 量处理目标的处理。
如上所述，根据图3的处理，处理目标确定部20基于所选图像设定 目标值并将这些目标值存储在存储器中。
接下来，针对各个几何特征参数和图像质量特征参数对修正量计算 部30和图像处理部40所执行的修正处理进行说明。
首先说明对于几何特征参数的修正处理。
图10是几何特征参数修正过程的流程图。
在几何特征参数的修正过程中，根据通过图7的处理所获取的各种 处理目标的目标值进行实际的修正处理。在几何特征参数的修正处理中， 在图2所示的图像处理服务器1中，首先，图像输入单元11接收待处理 的图像(图像数据、数字图像)(步骤401)，并且序号分配/总数计数处 理单元12将图像序号Gn分配给各个输入图像(步骤402)并对待处理的 图像的总数N进行计数(步骤403)。可以由诸如图1所示的显示装置6 的用户终端任意地选出(指定)待修正的图像。在这种情况下，图像总 数N是由用户终端指定的所有图像的数目。然后，修正量计算部30的图 像特征参数提取单元31从N个图像中读出第Gn个图像(开始的第一个 图像)(步骤404)。识别待处理的主对象(步骤405)，提取所识别的主 对象(简称为“对象”)的轮廓(步骤406)，并提取对象的外切矩形(步 骤407)。然后，图像特征参数分析单元32分析待处理的图像的特征参数。 具体地，计算对象的外切起始位置(步骤408)，计算对象的大小(步骤 409)，并计算对象的重心(步骤410)。根据图像修正处理，并非所有上 述步骤都要执行。
然后，图像修正量计算单元33读出由目标值设定/存储单元25根据 所选的一个或多个图像设定并存储的目标值(步骤411)，并根据由图像 特征参数分析单元32分析的特征参数与读出的目标值之差计算修正量 (步骤412)。将所计算出的修正量输出到图像处理部40。图像处理部40 的几何特征参数修正单元41修正外切起始位置(步骤413)、大小(步骤 414)和重心位置(步骤415)中必要的一个或多个。然后，确定是否对 所有的N个图像进行了修正，换言之，是否Gn＜N(步骤416)。如果Gn＜N， 则处理返回到步骤404以再次执行步骤404-415(即，对下一图像进行 修正处理)。如果Gn≥N，则完成了几何特征参数的修正处理。
下面将说明如何将上面的过程应用于图8的示例图案。如果通过使 用外切起始位置的平均坐标(XsM，YsM)和所选图像大小的平均值XdM 和YdM来修正图像图案-2，则示例结果如下：
图像偏移：移动(XsM-Xs2，YsM-Ys2)个像素
图像放大：放大YdM/Yd2倍(采用了垂直因子)。
由于对几何特征参数进行了统一化，所以这些修正提供了便于查看 的编排图像。
接下来，将对图像质量特征参数的修正处理进行说明。
图11是对于图像质量特征参数(图像质量)的修正过程的流程图。 在图像处理服务器1中，首先图像输入单元11接收待处理的多个图像， 并且序号分配/总数计数处理单元12按顺序将图像序号Gn分配给待处理 的图像(步骤502)并对待处理的图像的总数N进行计数(步骤503)。 然后，图像特征参数提取单元31读出第Gn个图像(例如，从第G1个图 像开始按照图像序号Gn的升序读出N个图像)(步骤504)并对从背景中 分离出的主对象进行RGB转换(步骤505)。随后，获取RGB直方图(步 骤506)，计算R分布最大值r_max(步骤507)，G分布最大值g_max(步 骤508)，和B分布最大值b_max(步骤509)。使用由目标值设定/存储单 元25基于所选图像根据图9的流程图设定的目标值Rmax_target、 Gmax_target和Bmax_target产生色彩平衡(CB)修正LUT(查询表)(步 骤510)。对进行了RGB转换的图像进行色彩平衡修正(步骤511)。
然后，例如，在转换为L*a*b*之后，对待处理的图像的主对象进行 亮度转换(步骤512-516)和饱和度转换(步骤517-521)。在亮度转 换(步骤512-516)中，例如，使用L*获取亮度直方图(步骤513)。然 后，计算分布平均值L_ave(步骤514)。使用由目标值设定/存储单元25 基于所选图像根据图9的处理所设定的目标值L_target产生明度修正 LUT(步骤515)。然后，图像质量修正单元42使用明度修正LUT进行明 度修正(步骤516)。以下面的方式进行步骤517-521的饱和度转换。例 如，使用a*b*获取饱和度直方图(步骤518)，并计算分布平均值S_ave (步骤519)。然后，使用由目标值设定/存储单元25基于所选图像设定 的目标值S_target计算饱和度修正系数(步骤520)。由图像质量修正单 元42使用由此设定的饱和度修正系数进行饱和度修正(步骤521)。在以 上述方式进行了明度和饱和度修正之后，进行RGB转换以与图像输出格 式一致(步骤522)并输出图像(步骤523)。然后，确定经过处理的图 像数目是否等于图像总数N，换言之，是否Gn＜n(步骤524)。如果Gn＜N， 则处理返回到步骤504以再次执行步骤504-523。如果经过处理的图像 的数量等于图像总数N，则完成修正处理。
由于以上述方式对图像质量进行了修正，可以使对象的明度、颜色、 和/或鲜艳度等于一个或多个所选图像。
如果发出指令以使背景颜色与所选图像相同，则执行下面的背景修 正处理。
图12是根据所选的一个或多个图像的背景计算处理目标的过程以 及对多个图像进行修正的流程图。在图像处理服务器1的处理目标确定 部20中，首先所选图像确定单元22读出所选图像(步骤601)。然后， 特征参数提取单元23识别背景区域(步骤602)并对背景颜色进行采样 (步骤603)。以亮度、明度和饱和度来对所采样的背景颜色进行基本定 义。然后，确定是否对所有所选图像完成了抽样(步骤604)。如果只存 在一个所选图像或者已对所有所选图像完成了背景颜色的采样，则目标 值设定/存储单元25设定并存储背景颜色(步骤605)，由此完成了背景 的处理目标的计算。如果存在多个所选图像并且还没有对所有所选图像 进行背景颜色的采样，则处理返回到步骤601以再次执行步骤601-603。 如果预先设定了标准，则存储满足这些标准的目标值。如果在实际处理 的时候确定标准，则可以存储所有所选图像的背景图像信息。如果对所 选图像的背景颜色取平均值，则基准特征参数分析单元24进行取平均值 等的操作。
另选地，可以根据用户的指令确定背景颜色的目标值。例如，如果 选择了多个图像作为目标图像，则可以通过显示下面的选项来确定目标 值：
采用最亮的背景颜色；
采用最暗的背景颜色；
采用最鲜艳的背景颜色；和
对背景颜色进行平均，
并使用户指定这些项中的一项。
然后，对待处理的多个图像进行背景修正。在图像处理服务器1中， 图像输入单元11接收待处理的图像(步骤606)。序号分配/总数计数处 理单元12将图像序号Gn分配给各个输入图像(步骤607)并对图像的总 数N进行计数(步骤608)。然后，背景处理单元43读出第Gn个图像(例 如，从第G1个图像开始以图像序号Gn的升序读出N个图像)(步骤609)， 并识别背景区域(步骤610)。背景处理单元43从图像修正量计算单元 33获取所确定的背景目标值(步骤611)，并将目标值应用于待处理的图 像的背景区域(步骤612)。然后，确定经过处理的图像的数目是否等于 图像总数N，换言之，是否Gn＜N(步骤613)。如果Gn＜N，则处理返回到 步骤609以再次执行步骤609-612。如果经过处理的图像的数目等于或 者大于图像总数N，则完成修正处理。通过上述方式，可以使用一个或多 个所选目标图像(样本图像)进行背景修正处理。
最后，参照图13和14对根据所选图像(目标图像)设定几何特征 参数和图像质量特征参数的目标值以及将这些目标值应用于修正对象图 像的一系列示例处理进行说明。
图13示出了提取所选图像的特征参数的步骤。图13的(a)部示出 了一个所选图像，该所选图像显示在例如显示装置6(用户终端)的显示 设备上并已通过用户终端被指定为目标图像。为了提取几何特征参数， 首先，如图13的(b)部所示对所选图像进行二值化。如图13的(c) 部所示，对二值化后的图像进行标记。在本示例中，对三个图像组件L1 -L3进行标记。然后，如图13的(d)部所示计算最大外切矩形。例如， 当坐标系的原点位于左上角时，通过下面的方式计算最大外切矩形的垂 直和水平边：最上面的具有最小坐标值的线；最左面的具有最小坐标值 的线；最下面的具有最大坐标值的线；和最右面的具有最大坐标值的线。
图14示出了使用如图13所示计算出来的所选图像的特征参数对修 正对象图像进行的处理。在本示例中，计算四个图像余边，即上、下、 左、右图像余边，以作为图14的(a)部所示的所选图像的几何特征参 数目标值的一部分。计算明度值和饱和度值以作为图14的(b)部所示 的所选图像的图像质量特征参数目标值的一部分。另一方面，首先对图 14的(b)部所示的修正对象图像进行二值化，然后计算最大外切矩形。 将为所选图像计算出的图像余边应用于由此计算出的最大外切矩形，由 此确定剪辑范围。然后，将由此确定的范围中的图像部分剪辑出来并根 据由所选图像计算出的明度和饱和度值对该部分图像进行明度和饱和度 修正。这样，可以使用根据所选图像确定的目标值来进行图像处理。
如上面的详细说明，在本实施例中，根据通过用户终端选择的一个 或多个所选图像(所选图像数据)确定目标处理目标，并将这些标准应 用于多个图像中的各个图像(图像数据)。即，将多个样本图像显示给用 户以进行样本图像处理。在样本图像处理中，以用户选择的图像作为参 照计算修正参数，然后对这些参数进行处理。在本图像处理装置中，由 于根据所选图像而不是单个图像的状态来进行处理，所以可以针对非预 期的、未知的目的进行修正处理。可以使用户随意地设定处理目标。然 而，以数值形式预设饱和度和明度需要足够的经验并且很难将感觉印象 与数值联系起来。与之相反，根据本实施例，用户终端识别出给予用户 他/她所期望的印象的图像，从而可以自动确定基于用户印象的修正量， 并可以简单正确地进行修正。如果根据多个所选图像确定处理目标，则 可以根据更为准确的处理目标获得修正结果。
期望可以以多种形式使用本实施例，例如应用程序的形式、打印机 驱动程序的形式和与数字照相机合作的形式。示例性的应用程序形式为 使用本实施例作为使用由数字静止照相机(DSC)拍摄的图像来制作相册 的功能，或者作为管理软件的插件(plug-in)等的自动调整用户获取的 图像的功能。示例性的打印机驱动程序形式为使用本实施例作为可以在 驱动程序设定中作为可选功能选择的功能，或者内建在模式设定本身中 的功能。示例性的与数字照相机合作的形式为使用本实施例作为在打印 阶段发出调整指令的功能(标签信息藏在文件格式中)。
将应用了本实施例的计算机程序施加于计算机(用户终端)，如图像 处理服务器1、图像传输装置5、显示装置6、和打印图像处理装置8， 不仅可以采用安装在计算机中的形式，而且可以采用存储在存储介质中 从而可由计算机读取并执行的形式。存储介质为例如各种DVD、CD-ROM 介质和卡式存储介质。由上述各个计算机中的DVD或CD-ROM读取设备、 卡片读取设备等来读取该程序。将该程序存储在上述各个计算机中的各 种存储器(诸如HDD和闪存ROM)中的任何一种中，并由CPU来执行。另 选地，可以通过网络从程序传输设备提供该程序。
例如，本发明可以应用于与成像装置(如打印机)相连的计算机、 通过因特网等提供信息的服务器、数字照相机，以及在所述各种计算机 中执行的程序。
在根据本发明一个方面的图像处理装置中，特征参数识别装置从用 户选择的所选图像数据中识别出所选图像数据的特征参数，图像处理装 置使用由特征参数识别装置识别的所选图像数据的特征参数作为一个目 标值来对多个图像数据分别进行图像处理。这里“图像数据”一词与“图 像”的意思大致相同。这适用于整个说明书。
在本图像处理装置中，所选图像数据为存储在一个或多个存储器中 的多个图像数据中的一个和一些图像数据。特征参数识别单元将样本图 像提供给用户终端，并且通过用户终端进行针对样本图像的输入而选择 出所选图像数据。特征参数识别装置识别一个或多个所选图像数据的几 何特征参数，并且/或者识别包含一个或多个所选图像数据的明度、对比 度、饱和度、色调和分辨率中的至少一个的图像质量特征参数作为所述 特征参数。
“用户终端”可以为通过网络与本图像处理装置相连的计算机或者 其本身用作为图像处理装置的计算机。这适用于整个说明书。
在根据本发明另一方面的图像处理装置中，显示装置以列表的形式 显示多个图像数据，识别装置识别所显示的多个图像数据中的一个或一 些图像数据作为所选图像数据。特征参数识别装置从识别装置识别的所 选图像数据中识别出所选图像数据的特征参数，设定装置对于要进行图 像处理的图像数据将所识别的特征参数设定为图像修正处理的一个目标 值。
由特征参数识别装置识别的特征参数可以是与主对象如何放置在所 选图像中相关的特征参数。特征参数识别装置计算主对象的外切矩形， 设定装置将基于计算出的外切矩形的图像余边设为一个目标值。识别装 置对于各个特征参数识别不同的图像数据以作为所选图像数据，或者对 于各个特征参数识别不同数目的图像数据作为所选图像数据组。识别装 置从所显示的多个图像数据中识别由用户通过输入设备选择的作为与用 户想象的图像接近的图像数据，以作为所选图像数据。
另一方面，也可以以方法的形式实现本发明。即，根据本发明另一 方面的图像处理方法包括下面的步骤：从存储装置中读出多个图像数据 并将这多个图像数据显示在用户终端上；通过用户终端从所显示的多个 图像中识别对图像数据的选择以作为图像处理的目标；提取通过用户终 端识别的图像数据的特征参数；并根据所提取的特征参数设定待对另一 图像数据进行图像处理的目标值，并将该目标值存储在存储器中。
在该图像处理方法中，显示多个图像数据的步骤将引导信息与多个 图像数据一起显示，以用于通过用户终端选择目标图像数据。通过用户 终端识别选择的步骤对于要提取的各个特征参数识别一个或多个图像数 据的选择。所提取的特征参数为主对象的几何特征参数和/或图像质量特 征参数。几何特征参数可以为与主对象如何放置在识别选择的图像中相 关的特征参数。
本发明还可以实施为由计算机执行的程序。即，根据本发明另一方 面的程序使计算机执行下述功能：从存储装置中读出多个图像数据并将 该多个图像数据显示在用户终端上；通过用户终端从所显示的多个图像 数据中识别对图像数据的选择以作为图像处理的目标；提取通过用户终 端识别了选择的图像数据的特征参数；根据所提取的特征参数设定待对 另一图像数据进行图像处理的目标值，并将该目标值存储在存储器中； 使用设定并存储在存储器中的目标值对规定的图像数据进行图像处理。
设定并存储在存储器中的目标值是根据选择识别的图像数据计算出 的修正参数，进行图像处理的功能是使用计算并存储在存储器中的修正 参数对预定的图像数据进行图像处理。
根据本发明，可以根据给予用户他或她所期望的印象的图像(图像 数据)来确定修正值。具体地，在显示或打印多个图像时，可以根据所 选图像获得统一化的图像。
虽然参照具体实施例对本发明进行了说明，但是显而易见，本领域 的技术人员可以在本说明书的教示的基础上进行各种变化和修改。将这 些显而易见的变化和修改视为落入附加权利要求所定义的本发明的精 神、范围和实质中。