公知的多媒体系统，例如是电视机、DVD音像播放机，大都具备遥控功 能，让使用者在一定距离内，通过一台搭配多媒体系统的遥控器，以有线或 是无线的方式，控制多媒体系统的运作，例如是设定多媒体系统，或是控制 其播放多媒体信息，如电视广播节目、DVD影片。
但是，站在使用者的角度，上述公知的遥控多媒体系统的方式却因为需 要一台遥控器而造成其他使用上不方便的问题。首先，因为遥控器的体积少， 若要能让使用者正确的控制多媒体系统多样化的功能，必需具有许多的按键。 而且，每台遥控器都具有某些不同的操作方式，加上许多的按键，操作方式 往往变得复杂，令不熟悉该多媒体系统的使用者更不容易掌握，并需要花费 时间学习及习惯。此外，若不小心把遥控器放在不显眼的地方，使用者需要 花费时间寻找。再者，遥控器需要安装电池，需要消耗能源。若电池电力不 足或电池品质不佳时，往往会造成不可预期的问题，例如是操作上的失败， 更甚者，遥控器因电池内容物的漏出而毁坏掉。
故此，为了使用者轻易的遥控多媒体系统或是解决上述问题，多媒体系 统需要有一种有别于公知利用遥控器的遥控方式以满足使用者对方便性的需 求。

有鉴于此，本发明的目的就是在提供一种使用于多媒体系统的基于脸部 检测的遥控系统及其方法以及具有基于脸部检测的遥控功能的多媒体系统。 多媒体系统的使用者，身体某部分的自然行为，例如脸部及眼睛，会被检测 并分析并据以产生特性参数，特性参数与条件参数进行比较，比较的结果会 用以决定如何遥控多媒体系统的运作。
根据本发明的目的，提出一种使用于多媒体系统的基于脸部检测的遥控 方法的一实施例，使用于一多媒体系统，该遥控方法包括：(a)依据该多 媒体系统的一操作模式，通过一检测装置检测存在的至少人脸的一部分，并 据以输出一人脸图像信号；(b)依照该人脸图像信号，分析所检测到的至少人 脸的一部分，以产生相对应的至少一特性参数；(c)比较至少该特性参数与至 少一条件参数，以产生一比较结果，其中该条件参数与该操作模式的至少一 控制操作相关联；以及(d)依据该比较结果，产生至少一指示信号给该多媒体 系统。
根据本发明的目的，提出一种使用于多媒体系统的基于脸部检测的遥控 系统的一实施例，使用于一多媒体系统中，其中该多媒体系统具有一操作模 式，该操作模式具有至少一控制操作。该遥控系统包括：一检测装置及一图 像分析与指示产生单元。检测装置依据该操作模式，用以检测存在的至少人 脸的一部分，并据以输出一人脸图像信号。图像分析与指示产生单元，与该 检测装置耦接，用以依照该人脸图像信号，分析所检测到的至少人脸的一部 分，以产生相对应的至少一特性参数，并比较至少该特性参数与至少一条件 参数，并据以产生一比较结果，并依据该比较结果，产生至少一指示信号给 该多媒体系统，其中该条件参数与该操作模式的至少该控制操作相关联。
根据本发明的目的，提出一具有基于脸部检测的遥控功能的多媒体系统 的一实施例，其中该多媒体系统具有一操作模式，该操作模式具有至少一控 制操作。该多媒体系统包括一检测装置、一图像分析与指示产生单元及一播 放装置。检测装置，用以依据该操作模式，检测存在的至少人脸的一部分， 并据以输出一人脸图像信号。图像分析与指示产生单元，与该检测装置耦接， 用以依照该人脸图像信号，分析所检测到的至少人脸的一部分，以产生相对 应的至少一特性参数，并比较至少该特性参数与至少一条件参数，以据以产 生一比较结果，并依据该比较结果，产生至少一指示信号，其中该条件参数 与该操作模式的至少该控制操作相关联。播放装置，用以依据接收至少该指 示信号，播放多媒体信息。
为让本发明的上述目的、特征、和优点能更明显易懂，下文特举较佳实 施例，并配合附图，详细说明如下：

图1为依据本发明的多媒体系统的一实施例的方块图，其中该媒体系统 包括一基于脸部检测的遥控系统的的一实施例。
图2表示依据本发明的具有基于脸部检测的遥控功能的多媒体系统的另 一实施例。
图3为一基于脸部检测的遥控方法的一较佳实施例的流程图。
图4A为一基于脸部检测的遥控方法应用于多媒体系统的播放模式时的 一实施例的流程图。
图4B为图4A中，用以产生指示信号给多媒体系统的步骤440的一实施 例的流程图。
图5为一示意图，表示将依据本发明的一基于脸部检测的遥控系统应用 于多媒体系统的命令选项模式时的一实施例。
主要元件符号说明
100、200：多媒体系统
110：播放装置
120、520：显示装置
130：遥控系统
140、540：检测装置
150、550：图像分析与指示产生单元
210：系统主机
500：眼睛
521、522：遥控选项
580、590：箭头

本发明为依据人类身体某部分的自然行为，如人的头部，包括脸或人脸 任何一部分，如人脸、眼睛、下巴、嘴巴、嘴唇、鼻子、耳朵、脸颊、头发、 胡须，或上述的各种组合，将的与遥控多媒体系统的操作(如指示播放或改变 设定)相关联，以作为产生指示信号给多媒体系统的基础来源，从而改变多媒 体系统的操作行为。如此，操作多媒体系统的方式将变得更为容易及直接， 并可据该衍生智能型的控制方式，也就是说，遥控系统可依据实际检测的结 果，不必使用者亲自给予指示而自动发出指示信号以调整多媒体系统的运作。 以下通过不同的实施例说明本发明的各种实施方式，其中我们以人脸及眼睛 的行为，将的与遥控多媒体系统的操作(如指示播放或改变设定)相关联为例 子以作说明。
请参考图1，其为依据本发明的多媒体系统的一实施例的方块图，其中 该多媒体系统包括一基于脸部检测的遥控系统的一实施例。多媒体系统100 包括一播放装置110、一显示装置120以及一遥控系统130。
多媒体系统100，具有处理多媒体数据及据以重现多媒体信息功能的系 统。多媒体系统100具有至少一操作模式，例如是播放模式，操作模式具有 至少一控制操作，例如是播放、暂停或停止操作。多媒体系统100又例如具 有命令选项模式，命令选项模式具有至少一命令选取操作，命令选取操作用 以设定或控制多媒体系统100。至少有一条件参数与该至少一控制操作相关 联。
遥控系统130用以依据人的自然行为，以脸部或至少其中一部分为基础， 产生一指示信号，以改变多媒体系统100的操作行为。遥控系统130包括一 检测装置140及一图像分析与指示产生单元150。遥控系统130可利用物件 检测(object detection)、目标跟踪(object tracking)或脸部检测(human face detection)等技术。
检测装置140，为可检测人体或是提取图像的装置，例如是电荷耦合元 件(CCD)、数字摄像机(camera)、网络摄像机(webcam)或数字图像提取器 (video capture device)，用以依据上述操作模式，通过一检测装置检测存 在的人脸或至少人脸的一部分，并据以输出一人脸图像信号。检测装置140 例如是具有自动对焦(auto-zooming)的功能，或是人脸特征提取的功能，或 眼球跟踪定位的功能(eyeballs tracking and location)。
图像分析与指示产生单元150，与检测装置140耦接，用以依照人脸图 像信号，分析所检测到的至少人脸的一部分，以产生相对应的至少一特性参 数，此外图像分析与指示产生单元150更依据该至少一特性参数及至少一条 件参数，用以判断是否产生至少一指示信号给多媒体系统100。在实际操作 时，图像分析与指示产生单元150比较该至少一特性参数与该操作模式的至 少一控制操作相关联的条件参数，以产生一比较结果，并依据该比较结果， 产生至少一指示信号。该图像分析与指示产生单元150，例如是以一数字图 像处理器(digital image processor)，一微处理器(microprocessor)、或单 片系统(system on chip)以实现，此外，该单元150亦可包含存储器以存储 数据。
播放装置110，例如是一DVD播放机、一数字录放像机或一无线网络多 媒体播放机。播放装置110用以依据至少该指示信号，并据以处理多媒体信 息，或依据该指示信号设定播放装置110。播放装置110处理及输出多媒体 信号。播放装置110是一可以处理多媒体数据的处理装置，例如是一电脑系 统或音像播放机或录放像机。播放装置110可以实施以使的能读取存储媒体， 如光盘、硬盘或记忆卡，或是以有线或无线方式读取数字图像或声音数据， 以作处理及播放。
显示装置120，例如是平面显示器、液晶显示器、CRT显示器、投影显示 器，用以依据播放装置110所输出的多媒体信号以重现图像及声音。
此外，播放装置110与显示装置120亦可实现为一整合用以处理多媒体 数据以作多媒体重现的单元，例如是桌上或笔记型电脑系统、数字电视机、 模拟电视机或视频会议系统。
请参考图2，其为依据本发明的具有基于脸部检测的遥控功能的多媒体 系统的另一实施例。该多媒体系统200与图1的实施例同样具有播放装置110、 显示装置120、检测装置140及图像分析与指示产生单元150。
但该两实施例的结构上不同：播放装置110与图像分析与指示产生单元 150存在于一系统主机210之中。此外，依据图2，可得多媒体系统的另一实 施例，如把图2中的检测装置140改为内置在系统主机210之中。
图3为一基于脸部检测的遥控方法的一较佳实施例的流程图。遥控方法 包括如下步骤：如步骤310所示，首先，设定至少一条件参数。如步骤320 所示，依据该多媒体系统的一操作模式，通过一检测装置，检测存在的至少 人脸的一部分，并据以输出一人脸图像信号。如步骤330所示，依据人脸图 像信号，分析所检测到的至少人脸的一部分，以产生相对应的多个特性参数。 如步骤340所示，对这些特性参数与该操作模式的至少一控制操作相关联的 一条件参数作比较，以产生一比较结果。接着，如步骤350所示，依据该比 较结果，产生至少一指示信号给多媒体系统。
在图3中，步骤310设定至少一条件参数于步骤320之前，只是其中一 种实施方式。步骤310亦可以于步骤320执行的同时或之后执行。而在实际 操作上，步骤310的条件参数可以为预设的数据，不需要在操作时才设定。 而另一种实际操作方式中，多媒体系统在操作中依据操作模式的需要，自行 设定或调整条件参数。另外，条件参数亦可以由使用者设定的。总之，条件 参数与该多媒体系统的一操作模式的至少一控制操作相关联。
在本发明以下的实施例中，多媒体系统可具有一个至多种操作模式。以 下，首先以该操作模式为一播放模式为例以公开本发明的遥控方法的一实施 方式；接着，以该操作模式为一命令选项模式以公开本发明的遥控方法的另 一实施方式。请注意，有关条件参数的设定，可以不同的方式实际操作；故 此，以下的实施例所叙述的设定条件参数的步骤，其执行次序亦可如上述般 的以各种次序或方式实际操作。
图4A为一基于脸部检测的遥控方法应用于多媒体系统的播放模式时的 一实施例的流程图。
如步骤410所示，设定条件参数包括：(1)观众人数Na、(2)延迟时间Td 及(3)未离席观众阈值p％，并与播放模式的”播放”、”停止”、”暂停”操作 相关联。如步骤420所示，依据播放模式，通过检测装置检测存在的观众的 人脸以及至少人脸的眼睛部分，以输出一人脸图像信号。如步骤430所示， 依照人脸图像信号，分析所检测到的人脸以及至少人脸的一部分，以产生相 对应的特性参数包括：(1)人脸数目及(2)睁开眼数目。如步骤440所示，比 较依照人脸图像信号所产生的特性参数，与播放模式的至少一控制操作相关 的条件参数，以产生指示信号给多媒体系统。此外，当步骤440执行之后， 该方法的实施例可以从步骤420开始，重复进行检测，继续产生指示信号给 多媒体系统。
本案实施例的步骤430以特性参数(1)人脸数目Nf及(2)睁开眼数目Ne为 例，而步骤440中可依据该两特性参数，实施不同的比较方式，以产生指示 信号给多媒体系统。请参考图4B，其为步骤440的一实施例的流程图。为方 便解释，以下以观众人数Na为5，延迟时间Td为10分钟，未离席观众阈值 p％为80％，作为例子说明。
在图4B中，如步骤441所示，首先比较人脸数目Nf是否实质上大于或等 于观众人数Na的一百分比，例如是判断分析所得的人脸数目Nf(例如为4)是 否大于或等于(Na×p％)，即(5×0.8)＝4人。若是，则执行步骤442以判断睁 开眼数目Ne是否实质上大于或等于该观众人数Na的另一百分比，例如是判断 分析所得的睁开眼数目Ne(如8只眼睛)是否大于或等于(2Na×p％)，即 (2×5×0.8)＝8只眼睛。若步骤442中比较结果为是，所产生的指示信号代表” 播放”操作，如步骤447及460所示。
在步骤441或442中，若结果为否，则执行步骤443，以判断所检测的 人脸数目Nf是否为0。若是，则进入步骤444以判断是否已开始暂停并且已 经过了延迟时间Td。若步骤443或444的判断结果为否，则所产生的指示信 号代表”暂停”操作，如步骤449及460所示。
若步骤444的结果为是(例如已暂停了11分钟)，则所产生的指示信号代 表”停止”操作，如步骤448及460所示。
在上述图4A及图4B依据人的自然行为，以脸部及其部分基础，以改变 多媒体系统的操作行为。例如，当观众人数及其睁开眼数目符合要求时，该 多媒体系统就自动开始播放，如步骤441、442、447及460所示。又例如， 当有一部分观众因故暂时离席时，而且离席人数很多，该多媒体系统就自动 暂停播放，如步骤443、444、449及460所示。但若暂停了一段延迟时间Td， 例如10分钟以后，观众人数N及其睁开眼数目Ne还是不符合要求的话，该多 媒体系统就停止播放，如步骤444、448及460所示。
在上述图4A及图4B所述的实施例中，使用3个条件参数及2个特性参 数为例，以示如何改变多媒体系统的操作行为。然而，亦可以采用至少一个 条件参数，以至少脸部的一部分或是人脸为基础，以改变多媒体系统的操作 行为。例如，检测存在的观众的人脸，并判断是否有两位观众存在；若是， 则产生指示信号给多媒体系统以开始播放；在此，条件参数即为观众人数Na 为2，也就是判断人脸数目Nf是否大于或等于2。又例如，条件参数的观众人 数Na为2，及特性参数为眼睛的睁开眼数目Ne，判断存在的观众的睁开眼数 目Ne是否大于或等于条件参数的观众人数Na，以决定是否指示多媒体系统开 始播放。对于其他人脸的部分或人脸部分的各种组合，亦可采上述的方式， 据以作为改变多媒体系统的操作行为的基础来源，以实现控制多媒体系统的 目的。
如此，上述实施例可称为智能型(intelligent)的控制方式，也就是说， 遥控系统可依据实际检测的结果，不必使用者亲自给予指示，而自动发出指 示信号以调整多媒体系统的运作。
接着，以多媒体系统的操作模式为一命令选项模式以公开本发明的遥控 方法的另一实施方式。请参考图5，其示意依据本发明的一基于脸部检测的 遥控系统应用于多媒体系统的命令选项模式时的一实施例。
在多媒体系统于命令选项模式时，显示装置520显示一个或多个选项， 以让使用者选择，使用者只要把眼睛注视在其中一个代表选项的物件，例如 是画面上的图象、方块、区域或文字的区域，若眼睛所注视的时间符合相对 应的条件的话，例如眼球注视在一遥控选项上超过或约3秒时，即可实现选 取该选项的目的。
在图5中，使用者以眼睛或眼球500所表示，而显示装置520显示的选 项，例如是选项521、522。
请同时参考图3及图5，以便于说明本实施例的遥控方法。如步骤310 所示，设定一注视时间阈值TF0作为一条件参数，使的与命令选项模式的命 令选取操作相关联。如步骤320所示，检测存在的人脸以及人脸的眼睛部分， 并据以输出人脸图像信号，其中可利用针对眼睛的跟踪技术，例如眼球跟踪 与定位技术(eyeballs tracking and location)。如步骤330所示，依据人 脸图像信号，分析所检测到的人脸以及人脸的眼睛部分，产生相对应的多个 特性参数，这些特性参数包括该眼睛所注视的方向(如以球状座标示的)，以 及该眼睛所注视的方向的注视时间Tf。
接着，在步骤340中，首先判断该眼睛所注视的方向是否指向显示装置 520的显示画面上；若是，则判断该眼睛所注视的方向所对应到在显示画面 的位置并比较该位置是否对应到一代表遥控的选项，例如是图5中的选项 522。若该眼睛所注视的方向对应到一代表遥控的选项，则判断该眼睛所注视 的方向的注视时间Tf是否大于或等于一注视时间阈值TF0，如约3秒，以产生 一比较结果。
在步骤350中，若步骤340的比较结果为是，也就是说：该眼睛所注视 的方向对应到一代表遥控的选项而且眼睛的注视时间Tf(如约3.7秒)大于或 等于一注视时间阈值TF0(如约3秒)，则产生一指示信号代表该遥控选项的 被选取。
在本实施例的上述次步骤340中，检测装置540及图像分析与指示产生 单元550可求得自检测装置540至人脸或眼睛的方向与距离，如箭头580所 示，以及眼睛所注视的方向，如箭头590所示。此外，眼睛所注视的方向， 是否落在显示画面的某一选项，可通过查表(table lookup)或空间中的几何 运算等方式以实现。例如，预先建立一对应表(look-up table)，表达眼睛所 注视的各种方向(如以角度示的)与画面上各个区域(如以数字示的)的对应关 系，以便通过查表方式得到眼睛所注视的某一方向所对应的画面区域。
依据上述在命令选项模式下执行的遥控方法的实施例，可衍生出其他有 关选项的多种应用如下：
例如，当眼球的定位在”下一”(next)或”前一”(previous)上超过注 视时间阈值TF0后，指示信号即代表开始将目前播放的画面，或例如是节目或 曲目，改为下一个段落或是回到前一个段落持续到下一个播放选项开始执行 为止。当眼球定位的位置已经不在任何遥控选项上，即停止执行该功能。
当跟踪眼球的定位在”快转”(forward)或”倒转”(backward)，如图5 中的选项521及522上超过或等于注视时间阈值TF0时间后，即开始快转或是 倒转画面，并且当功能开始执行时眼球定位仍继续在该遥控选项上时，加快 快转或是倒转的速度，持续该遥控选项的功能直到下一个遥控选项的功能开 始执行为止，或是当眼球定位的位置已经不在任何遥控选项上后即停止执行 该功能。
当跟踪眼球的定位在音量选项，如图5中的”+”号的选项上超过或等于 注视时间阈值TF0时间后，即开始增加(或是减少，对应于”-“号的选项)播 放音量，持续该遥控选项功能直到下一个遥控选项的功能开始执行为止，或 是当眼球定位的位置已经不在任何遥控选项上后即停止执行该功能。
眼球跟踪技术亦可利用在控制菜单(menu)上不同遥控选项的选择，例如 遥控选项有10个，但是显示装置的画面一次只能呈现5个遥控选项，则可利 用眼球跟踪定位的技术进行遥控选项换页的操作，再者若观赏多媒体播放时 不需要遥控选项的菜单出现在显示画面上，亦可利用眼球跟踪定位技术将该 菜单关闭或隐藏。
另外，在实际操作时，上述的遥控方法的各实施例中，如步骤330至350 或相对应的步骤可以用一软件程序或程序函式加以实际操作，再配合一记录 条件参数与遥控功能及其关联关系的数据库或数据结构加以实现。此外，亦 可以硬体或韧体，或混合的方式来实际操作。
本发明上述各个实施例所公开的使用于多媒体系统的基于脸部检测的遥 控系统及其方法及多媒体系统，依据人类身体某部分的自然行为，将的与遥 控多媒体系统的操作相关联，以作为产生指示信号给多媒体系统的基础来源， 从而改变多媒体系统的操作行为。如此，操作多媒体系统的方式将变得更为 容易及直接，并可据该衍生智能型的控制方式，也就是说，遥控系统可依据 实际检测的结果，不必使用者亲自给予指示，而自动发出指示信号以调整多 媒体系统的运作。
综上所述，本发明虽以优选实施例公开如上，然其并非用以限定本发明， 任何本领域技术人员，在不脱离本发明的精神和范围的情况下，可进行更动 与修改，因此本发明的保护范围以所提出的权利要求所限定的范围为准。