帧指定方法
阅读：451发布：2020-05-11
专利汇可以提供帧指定方法专利检索，专利查询，专利分析的服务。并且本 发明 涉及 帧 指定 方法，其是为了提供一种根据用户的指令在 动态图像 中恰当地指定处理目标帧的技术。帧指定装置播放动态图像，在用户执行指令执行与该动态图像中的局部场景有关的处理的操作时，接收基于该用户的操作的指令 信号 ，并且因接收到该指令信号而被触发，在构成该动态图像的帧中指定在接收到该指令信号时的播放帧或者与该播放帧隔开预定时间长度的帧，作为处理目标帧。，下面是帧指定方法专利的具体信息内容。
1.一种通过计算机执行的帧指定方法，该帧指定方法包括以下步骤：
播放步骤，该播放步骤播放动态图像；
指令接收步骤，该指令接收步骤在用户进行如下操作，即指令执行与该动态图像中的广告信息场景有关的处理时，接收基于该用户的操作的指令信号；以及帧指定步骤，该帧指定步骤因接收到该指令信号而被触发，在构成该动态图像的帧中指定在接收到该指令信号时的播放帧作为处理目标帧，如果该处理目标帧中不存在关键字符，则指定从在接收到指令信号时的播放帧起向前经过预定时间长度的帧作为所述处理目标帧，如果依然不存在关键字符，则指定从在接收到指令信号时的播放帧起向后经过预定时间长度之后的帧作为所述处理目标帧，
其中，所述预定时间长度是基于接收到所述指令信号与用户进行所述操作之间的时滞来确定的。
2.一种帧指定装置，该帧指定装置包括：
播放单元，该播放单元用于播放动态图像；
指令接收单元，该指令接收单元在用户进行如下操作，即指令执行与该动态图像中的广告信息场景有关的处理的操作时，接收基于该用户的操作的指令信号；以及帧指定单元，该帧指定单元因接收到该指令信号而被触发，在构成该动态图像的帧中指定在接收到该指令信号时的播放帧作为处理目标帧，如果该处理目标帧中不存在关键字符，则指定从在接收到指令信号时的播放帧起向前经过预定时间长度的帧作为所述处理目标帧，如果依然不存在关键字符，则指定从在接收到指令信号时的播放帧起向后经过预定时间长度之后的帧作为所述处理目标帧，
其中，所述预定时间长度是基于接收到所述指令信号与用户进行所述操作之间的时滞来确定的。
3.根据权利要求2所述的帧指定装置，该帧指定装置还包括提取单元，该提取单元通过处理从该处理目标帧中提取所述关键字符。
4.根据权利要求3所述的帧指定装置，其中，所述帧被存储在存储单元中，并且从该存储单元中读取从在接收到该指令信号时的播放帧起向前经过该预定时间长度的帧，并将读取的该帧设置为分析目标帧。
5.根据权利要求2所述的帧指定装置，其中，该动态图像被限定为播送的TV广播信号。
帧指定方法
技术领域
背景技术
[0002] 播送的TV节目(动态图像；活动图像)除了节目的原始情节内容以外，还包含用于显示诸如商业产品的CM(商业消息)、节目预告、在原始版本的美食节目中介绍的商店位置以及在烹调节目中介绍的烹调食谱的各类信息(也被称为广告信息)的场景。
[0003] 针对需要这类广告信息的情况，一般实践是，在该信息显示在TV画面上的时段期间，将该信息快速写在纸上或者记录在视频上。
[0004] 然而，对于准备纸并在该纸上写下该信息或者启动视频系统并在视频上记录该信息来说，是很耗时的，而另一方面，广告信息保持显示时的时间段相对较短，导致不能写下或记录该信息的情况。
[0005] 为此，存在一种使得用户能够在这种显示广告信息的时机简单地通过遥控器给出指令来捕获所谓的画面备忘录(memo)以在存储器中临时存储显示图像的TV系统。
发明内容
[0006] 然而，当用户给出指令以捕获该备忘录时，过程为，该用户在察看并判断显示在TV画面中的广告信息是所需的信息之后，该用户手拿遥控器并给出捕获备忘录的指令，由此，出现这种问题，即，从显示广告信息起直到将捕获指令传递至TV系统为止存在时滞，并且不能确保总是捕获该用户所希望的信息。
[0007] 针对这种情况，本发明提供了一种根据用户的指令在动态图像中恰当地指定处理目标帧的技术。
[0008] 本发明采用下面的构造，以便解决上述问题。
[0009] 即，根据本发明，提供了一种通过计算机执行的帧指定方法，该帧指定方法包括以下步骤：
[0010] 播放步骤，该播放步骤播放动态图像；
[0012] 帧指定步骤，该帧指定步骤因接收到该指令信号而被触发，在构成该动态图像的帧中指定在接收到该指令信号时的播放帧作为处理目标帧，如果该处理目标帧中不存在关键字符，则指定从在接收到指令信号时的播放帧起向前经过预定时间长度的帧作为所述处理目标帧，如果依然不存在关键字符，则指定从在接收到指令信号时的播放帧起向后经过预定时间长度之后的帧作为所述处理目标帧，
[0013] 其中，所述预定时间长度是基于接收到所述指令信号与用户进行所述操作之间的时滞来确定的。
[0014] 而且，根据本发明，提供了一种帧指定装置，该帧指定装置包括：
[0015] 播放单元，该播放单元播放动态图像；
[0016] 指令接收单元，该指令接收单元在用户进行如下操作，即指令执行与该动态图像中的广告信息场景有关的处理的操作时，接收基于该用户的操作的指令信号；以及[0017] 帧指定单元，该帧指定单元因接收到该指令信号而被触发，在构成该动态图像的帧中指定在接收到该指令信号时的播放帧作为处理目标帧，如果该处理目标帧中不存在关键字符，则指定从在接收到指令信号时的播放帧起向前经过预定时间长度的帧作为所述处理目标帧，如果依然不存在关键字符，则指定从在接收到指令信号时的播放帧起向后经过预定时间长度之后的帧作为所述处理目标帧，
[0018] 其中，所述预定时间长度是基于接收到所述指令信号与用户进行所述操作之间的时滞来确定的。
[0019] 而且，本发明还可以是一种用于使计算机执行该帧指定方法的程序。而且，本发明还可以是一种记录有该程序的计算机可读记录介质。该计算机读取并执行该记录介质上的该程序，由此，使得能够提供其功能。
[0020] 在此，该计算机可读记录介质意指能够以电方式、磁方式、光学方式、机械方式或通过化学反应存储可以从计算机读取的诸如数据和程序的信息的记录介质。在这些记录介质中，例如，软盘、磁光盘、CD-ROM、CD-R/W、DVD、DAT、8mm磁带、存储器卡等可以被指定为可从计算机拆卸的记录介质。
[0023] 图1是搜索系统的示意图。
[0024] 图2是搜索方法(包括搜索关键字提取方法)的说明图。
[0025] 图3是通过自动地指定CM的预定区域来搜索该区域(尾部)的方法的说明图。
[0026] 图4是通过根据用户的操作指定帧来提取关键字的方法的说明图。
[0027] 图5是分析顺序的说明图。
[0028] 图6是在现场广播期间缓冲提取的关键字的实施例的说明图。
[0029] 图7是通过分析后指定帧并提取关键字来进行搜索的方法的说明图。
[0030] 图8是示出显示搜索结果的实施例的图。
[0031] 图9是包含模仿搜索框的区域的图像的说明图。
具体实施方式
[0032] 下面，参照附图，对用于执行本发明的最佳模式进行说明。下面的实施方式的构造是示范，而本发明不限于该实施方式中的构造。
[0033] <当前实施方式的概述>
[0034] 该实施方式的方案为，基于从广播站接收到的数据或者从诸如DVD(数字多媒体盘)的存储介质读取的数据来播放动态图像，并且如果用户标记显示了该动态图像中的广告信息的指定场景，则按照将该指示被传递至帧指定装置所需的时滞考虑在内的方式来指定多个场景构成帧。
[0035] 接着，指定的帧可以经受诸如提取字符和输出打印的预定处理。
[0036] 在下面的实施例中，示范了怎样指定帧，提取字符(关键字)以及使用该关键字执行搜索处理。
[0037] <装置构造>
[0038] 图1是根据该实施方式的搜索系统的示意图。
[0039] 该实施方式中的搜索系统10包括：广播站的播送TV广播的站侧装置101、接收通过该站侧装置101播送的动态图像(活动图像)的用户终端1、经由诸如因特网的网络提供信息的web服务器2、针对web服务器2提供的信息提供搜索服务的搜索服务器(搜索引擎)3、排名服务器4等。
[0040] 用户终端1对应于搜索系统10中的帧指定装置。
[0041] 用户终端1是通用计算机，该通用计算机包括：由CPU(中央处理单元)、主存储器等组成的算术处理单元12、存储有用于算术处理的数据和软件的存储单元(硬盘)13、输入/输出端口14、通信控制单元(CCU)15等。
[0044] CCU 15执行经由网络与其它计算机的通信。
[0046] 算术处理单元12恰当地从存储单元13读取OS和应用程序并执行该OS和该应用程序，并且算术处理从I/O端口14和CCU 15输入的信息项和从存储单元13读取的信息项，由此还充任图像获取单元(帧指定单元)、分析单元、提取单元、播放单元以及指令接收单元。
[0047] 图像获取单元获取图像信息(帧)。例如，图像获取单元接收TV接收单元16接收到的图像信息或者读取并获取存储(记录)在存储单元13中的图像信息。而且，图像获取单元在接收到从指令接收单元给出的标记信号时，从由此获取的帧中指定构成用户标记的场景的帧。
[0048] 播放单元基于图像获取单元获取的图像信息播放动态图像。具体地说，在显示单元上显示该动态图像，并且从扬声器输出该动态图像的声音。而且，针对播放，该播放单元向TV接收单元16通知根据用户的操作等要接收或切换的频道。
[0049] 指令接收单元接收根据用户的操作给出的搜索指令(指令信号)。
[0050] 分析单元指定与模仿搜索框(栏)的预定图案相对应的区域，作为模仿搜索框区域。
[0051] 提取单元通过在该模仿搜索框区域中识别字符来提取搜索关键字。
[0052] 搜索处理单元使用搜索关键字来执行搜索处理或预搜索处理。搜索处理单元经由CCU 15向搜索服务器3发送包含该搜索关键字的搜索请求，并且把从该搜索服务器发送回的搜索结果显示在显示单元上。而且，搜索处理单元还具有基于显示的内容和超链接的搜索结果等的概要，访问web服务器并且显示该内容的功能。应注意到，搜索处理单元可以涉及使用通用类型的web浏览器。
[0053] 另一方面，搜索服务器3是通用类型的所谓的基于计算机的搜索引擎，其包括用于接收来自用户终端1的搜索处理单元(web浏览器)的搜索请求的装置、存储有web服务器2的信息的存储装置、用于基于接收到的搜索请求的关键字从该存储装置搜索web服务器2的对应信息项的装置，以及用于向请求方用户终端1发送搜索结果的装置。
[0054] 而且，web服务器2经由诸如因特网的网络连接至诸如用户终端1和搜索服务器3的其它计算机。web服务器2向请求方计算机提供(发送)根据从另一计算机给出的访问请求(URL等)而指定的内容(文件)。应注意到，web服务器2具有公知的构造，从而省略了其深入描述。
[0055] 类似的是，排名服务器(关键字提供服务器)4经由诸如因特网的网络连接至诸如用户终端1和搜索服务器的其它计算机。排名服务器4响应于从其它计算机给出的请求，提供关键字(排名信息)，该排名服务器4中的存储单元存储有包含按从搜索次数从多到少的顺序排序的、用于在搜索站点上搜索而分类的关键字的排名信息。应注意到，排名服务器4还可以被组合用作搜索服务器3。而且，运营商可以在存储单元中存储用于CM的关键字。
排名服务器4具有和通用类型的web服务器所具有的构造相同的构造，由此，省略了其详细说明。
排名服务器4具有和通用类型的web服务器所具有的构造相同的构造，由此，省略了其详细说明。
[0056] <搜索方法>
[0057] 接下来，参照图2，对具有上述构造的用户终端1基于搜索程序执行的搜索方法(包括搜索关键字提取方法)进行说明。
[0058] 如图2所示，在用户终端1中，当通过用户的操作而指令音频/视频接收(播放)TV节目时，播放单元基于从存储单元13读取的或者从TV接收单元接收到的图像信息播放动态图像。
[0059] 这时，用户终端1的图像获取单元从构成该动态图像的一系列帧内指定(获取)满足后面将说明的预定条件的帧，作为分析目标帧(图像信息)(步骤1，其在下文中被简写为S1)。
[0060] 接下来，分析单元分析该指定的帧并且指定与模仿搜索引擎的搜索框的预定图案相对应的模仿搜索框区域(S2)。
[0061] 而且，提取单元识别模仿搜索框区域中的字符并提取关键字(S3)。
[0062] 接着，搜索单元启动web浏览器并且向搜索服务器发送提取单元提取的关键字，由此，进行搜索，并且显示搜索结果(S4)。
[0063] 通过下面的具体实施例对相应步骤中的具体处理进行说明。
[0064] <第一具体实施例>
[0065] 图3是示出从动态图像中自动指定CM帧的预定部分(尾部)的搜索方法的说明图。
[0066] 首先，图像获取单元在动态图像(活动图像)中检测除了节目的原始情节以外的CM帧(S11)。
[0067] 在满足下列条件的情况下，当前CM检测方法指定该CM帧。
[0068] 1、通过比较之前的帧和之后的帧来证明帧的整个区域不同(如果一致性程度小于预定值)，即，当视频片断切换时存在预定或更长的静音时段。
[0069] 2、节目的原始情节以单声道方式广播，而当播送CM时切换成立体声系统，由此将条件设置成，自将单声道系统切换成立体声系统起到广播返回至单声道系统为止的时间段。
[0070] 3、在预定时点(例如，15秒钟的倍数)切换视频片断。
[0071] 4、设置预定时点(例如，整点前5分钟)。
[0072] 5、基于从EPG(电子节目指南)获取的节目信息设置节目切换时间之前和之后的五分钟，以及从节目切换时间起等分节目(除以2或4)的时点。
[0073] 应注意到，CM检测方法可以涉及采用任何一种其它已知技术，并且还可以涉及使用这些技术的组合。
[0074] 接下来，图像获取单元设置用作CM长度基准的时间段L。在第一实施例中，时间段L被设置为例如L＝15(分钟)(S12)。
[0075] 另外，很可能通知关键字等的定时在CM帧的尾部，由此，图像获取单元获取从基于上述给出的条件检测出的CM帧的头部起向后经过预定时间长度(L/2、L/3、L-5(秒钟))直至L的帧。在第一实施例中，获取的帧在L-5到L的范围内(S13)。
[0076] 接着，分析单元分析图像获取单元获取的帧(图像信息)并且指定与模仿搜索框的预定图案相对应的区域，作为模仿搜索框区域，并且提取单元从该模仿搜索框区域提取字符(S14)。
[0077] 这时，因为分析单元如图9所示在图像中指定模仿搜索框的区域，所以沿水平方向(主扫描方向)和垂直方向(副扫描方向)扫描图像，并且提取这样的区域，即在该区域中，像素变得沿水平或垂直方向按预定或更长的距离延续以使形成直线。接着，将直线画出矩形的区域设置为模仿搜索框区域。
[0078] 尤其在本实施方式中，具有较短宽度(沿水平方向)的矩形62与一个矩形61相邻，并且如果字符[搜索]存在于较短矩形中，即，如果与诸如包含对应于搜索按钮的图像的预定图案一致，则矩形61的区域被指定为模仿搜索框区域。
[0079] 这时，如果能够提取到关键字，则向搜索单元通知该关键字，而如果不能够提取关键字，则向图像获取单元通知不能够提取的结果(S15)。
[0080] 接收到这种不能提取通知的图像获取单元判断这个提取目标帧是否到达从CM的头部起的L秒钟之后(S16)，并且如果判断该帧没有到达L秒钟之后，则获取下一帧(S17)。
[0081] 而且，如果在步骤S16中判断该帧到达L秒钟之后，则判断时间长度L是否小于60秒钟(S18)，接着，如果L不小于60秒钟，则处理结束，如果L等于或大于60秒钟，则随后将15秒钟加至L(S19)，并且如果没有超过CM的最大值(例如，60秒钟)，则处理返回至步骤S13，在该步骤中获取帧(S20)。
[0082] 应注意到，当在步骤S13获取帧时，可以获取范围在从L-5秒钟到L秒钟内的所有帧，然而，对于基于MPEG(运动图像专家组)系统的动态图像(活动图像)的情况来说，还可以仅获取I图片(帧内图)。因而，如果采取仅获取I图片的方案，则可以缩减吞吐量。
[0083] <第二具体实施例>
[0084] 图4是示出通过根据用户的操作指定帧来提取关键字的方法的说明图，而图5是示出第二实施例中的分析顺序的说明图。
[0085] 首先，当通过用户使用经由I/O端口14连接的键盘和遥控器的输入操作而输入关键字获取指令时(S21)，图像获取单元获取在接收到该输入时的时点播放的帧(S22)。
[0086] 接着，分析单元分析图像获取单元获取的帧(图像信息)，并且指定与模仿搜索框的预定图案相对应的区域，作为模仿搜索框区域，并且提取单元从模仿搜索框区域中提取字符(S23)。
[0087] 这时，如果能够提取到关键字，则向搜索单元通知该关键字，而如果不能够提取，则向图像获取单元通知不能够提取的结果(S24)。
[0088] 接收到这种不能提取的通知的图像获取单元判断这个提取目标帧是否为前一输入帧(S25)，并且如果为前一帧，则进一步判断，该帧是否为从接收到该输入时的时点起N秒钟之前的帧(S26)。
[0089] 如果在步骤26中判断不是N秒钟之前的帧，则获取之前一帧(S27)，而如果是N秒钟之前的帧，则获取在接收到该输入时的时点的下一帧(S28)。
[0090] 而另一方面，如果在步骤25中判断为在接收该输入之后的帧，则判断该帧是否为自接收到该输入时的时点起过了M秒钟之后的帧，而如果不是过了M秒钟之后的帧，则向图像获取单元通知该结果(S29)，并且获取下一个帧(S30)。应注意到，如果在步骤29中判断为过了M秒钟之后的帧，则终止提取处理。
[0091] 因而，在根据用户的输入指定帧的情况下，因为很可能用户在检测到动态图像中的关键字之后进行输入操作，所以按从接收到该输入时的时点起顺序地回溯帧的方式来指定帧，并且如果没有提取到关键字，则将接收到该输入时的时点之后的帧指定为分析目标帧，由此，使得能够迅速地执行分析处理。
[0092] <第三实施例>
[0093] 图6是示出在现场广播期间提取关键字并且缓冲提取的关键字的实施例的说明图。
[0094] 首先，图像获取单元确定播放的动态图像是否为现场广播(TV接收单元接收到的信息)(S31)，而如果为现场广播，则获取预设时点处的帧(S32)。
[0095] 分析单元从获取的帧中指定模仿搜索框区域(S33)。在此，如果可以指定模仿搜索框区域，则提取单元识别模仿搜索框区域中的字符(S34-S35)，并且提取关键字，而如果不能指定模仿搜索框，则处理返回至步骤S31。
[0096] 如果可以在步骤35中提取到关键字，则确定缓冲器是否充满数据(S36-S37)，接着，如果充满数据，则删除缓冲器中最老的数据(S38)，并将提取的关键字添加至缓冲器(S39)。
[0097] 关于已被缓冲的关键字，例如，当用户给出指令时，提取单元从缓冲器中读取最新的关键字，并向搜索单元通知该关键字，由此执行搜索。
[0098] 应注意到，在第三实施例中，将步骤35中提取的关键字存储在缓冲器中，然而，一个可用方案是，将步骤33中指定的模仿搜索框区域存储在缓冲器中，而可以省略步骤34、35。
[0099] 而且，针对在步骤32中顺序获取现场播放期间的帧的情况，可以获取构成动态图像(活动图像)的所有帧，然而，另一可用方案是，如果为基于MPEG系统的动态图像，则仅获取I图片(帧内图)。这个方案使得能够限制分析的存储容量和吞吐量。
[0100] <第四具体实施例>
[0101] 图7是示出分析后指定帧、提取关键字以及进行搜索的方法的说明图。
[0102] 首先，分析单元对分析目标帧进行分析，并且如果能够指定模仿搜索框区域(S41)，则提取单元识别这个模仿搜索框区域中的字符(S42)。
[0103] 如果能够从模仿搜索框区域中提取到关键字(S43)，则将该关键字与存储在排名服务器4中的数据库(存储单元)中的关键字进行比较，由此，确定是否存储有相似关键字(S44)。
[0104] 如果存在相似关键字，则搜索单元将该相似关键字设置为web浏览器上的搜索关键字，并且访问搜索站点，由此进行搜索(S45、S47)。而且，如果在步骤S44中确定不存在相似关键字，则将提取的关键字设置为搜索关键字，由此进行搜索(S46、S47)。
[0105] 当搜索站点执行基于关键字的搜索并发送回搜索结果时(S48)，用户终端1的搜索单元把该搜索结果的上层内容显示在显示单元上(S49)。
[0106] 图8是例示显示搜索结果的示例的图。
[0107] 在示出搜索结果的窗口中的地址框51中显示了搜索内容的URL，而在内容框52中显示了从web服务器接收到的内容。
[0108] 而且，在第四实施例中，还在与该内容的帧不同的帧中显示了搜索结果列表54和搜索关键字53。如果从搜索结果列表中选择其它链接，则还可以浏览除了上述给出内容以外的其它内容。
[0109] 应注意到，搜索结果显示方法不限于上述方法，而且还可以仅显示最高级内容或仅显示搜索结果列表。
[0110] 另一可用方案是，在不执行直到基于关键字的搜索的处理的情况下，预先搜索处理涉及在启动web浏览器的状态下停止处理，接着，将提取的关键字插入到搜索服务器2的搜索页面上的搜索框中，并且等待用户的操作。
[0111] <其它>
| 标题 | 发布/更新时间 | 阅读量 |
|---|---|---|
| 指定煎炉机构及煎炉指定方法 | 2020-05-11 | 226 |
| 指定位置检测装置 | 2020-05-13 | 66 |
| 场所信息指定装置和场所信息指定方法 | 2020-05-13 | 512 |
| 指定位置检测装置 | 2020-05-12 | 305 |
| 自动的供应者资源指定 | 2020-05-13 | 107 |
| 抢占指定路由器的方法 | 2020-05-12 | 529 |
| 地图上区间指定系统 | 2020-05-12 | 8 |
| 指定位置检测装置 | 2020-05-12 | 891 |
| 再现设备及其指定设备、指定系统、指定方法及记录介质 | 2020-05-12 | 588 |
| 在URL中指定链路层信息 | 2020-05-13 | 698 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台，是提供专利分析，专利查询，专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据，免费查、免费专利分析。
分析报告
专利汇分析报告产品可以对行业情报数据进行梳理分析，涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度，系统通过AI智能系统对图表进行解读，只需1分钟，一键生成行业专利分析报告。
QQ群二维码
意见反馈
意见反馈