电影自诞生之日起至今已经一个世纪了,期间有关影像和音响的技术得到了 突飞猛进的发展。大到可提供超宽而清晰的画面和立体音响的超大型系统,小到可 构成家庭影院的个人系统,随处可见各种各样的AV播放系统。
它说明空闲时间变多的现代人越来越希望看到更高
水平的影像作品,对超宽 而清晰的画面和更多频道的环绕立体音响的需求凸显人们喜欢更加真实的影像和 音响的趋向。
因此,近来得到飞速发展的AV技术正致
力于使观众能够通过视觉和听觉外的 另一种感受获得真实感。即,利用可刺激人们触觉或平衡感觉的新设备来使AV观 众能够切身体验实际影像动作的系统正在得到进一步的开发。
这种三维立体AV系统是指根据AV影像内的活动来提供特定动作效果的系统, 目前一种体验冒险游戏(Resort Game)的游戏器具或
虚拟现实系统的体验装置正 在被普遍使用。但是,这种游戏体验器具或虚拟现象系统的体验装置需要专用播放 设备和动作效果提供设备,该动作效果提供设备是在通过上述专用播放设备和特定 通信频道获取同步信息后,为了通过专用驱动装置提供同步于播放中的AV的动作 效果而制作的。因而,只有配备全部专用设备才能体验动作效果,个人难以达到。 另外,只能通过专用AV数据才能感受这种效果,而通过标准影像格式的AV媒体或 普通影像无法达到这种动作效果。
因此,一边播放普通AV媒体或影像,一边刺激人们的平衡感觉,能够提高真 实感。因而,使系统体积最小化的个人或家庭单位的体感AV系统也得到了开发。
图1是原有最普通的动作效果提供系统构成方
块图。如图所示,它具有能利 用简单的
音频信号向用户提供振动的构成,即指:着眼于在低音使扬声器产生严重 振动,把不出声但产生更大振动的无声振动扬声器35
接触观众的
皮肤或安装在观 赏用椅子上,然后通过增幅部30对用于播放AV的音频信号进行过滤(Filtering) 和增幅,来振动上述无声振动扬声器35的动作效果提供设备。将其附加给由普通 AV播放部10、显示部和音响产生部20构成的AV播放环境,能够使观众在产生低 音的部分感觉到物理振动。
虽然它能够通过比较便宜而简单的构成向观众提供刺激触觉的体验,但由于 单纯反应在从音频信号产生的低音上,所以存在着如下的问题:大多时候不能与画 面上的动作相匹配,而且当安装在观赏用椅子上时,观众感受到的振动十分微弱, 真实感极低。即,只不过使人单纯地对提供的稍微振动感到新奇,根本无法进行动 作的控制等,因而不能给观众真实感。
图2是可提供比较逼真的真实感的个人或家庭单位的动作效果提供系统方块 图。这种真正的三维立体AV系统包括以下两个组成部分:由可进行1个以上个别 控制的驱动部75a~75d和可正确控制它的驱动部控制与驱动信号生成部70构成的 驱动设备;可向上述驱动设备提供同步于AV数据的特定动作效果的动作效果提供 装置。该系统的特征在于:附加给由普通AV播放部10、显示部和音响产生部20 构成的AV播放环境,能够在播放普通AV媒体时提供富有真实感的动作效果。为此, 普通AV媒体的播放时点和动作效果的同步至关重要,这就需要在利用音频信号方 面给予高度重视。
从图示的结构看,它是通过普通播放设备-AV播放部40使普通AV盘(DVD、 BD等)41播放的,而且体现了典型的播放环境,那就是用由电视、放映机 (projector)等显示部及音频系统等的音响产生部构成的显示部及音响产生部进 行收听收看。但是,这里所使用的上述AV播放部40必须能够根据特定的数字格式 输出数据包化的音频信号,其理由如下:
这里的动作效果提供装置60可根据播放的AV进行状态将适合的动作效果提 供给上述驱动设备,从该动作效果提供装置的构成来看,它包括以下几个组成部分: 把从上述典型的播放环境中获得的音频信号解码(decoding)成数字数据数据包的 音频
解码器45;对要播放的一般AV盘41进行事先分析,将需要特定动作效果部 分的音频信号与指示特定动作效果的数据一起存储起来的同步
数据库63;把从上 述音频解码器45接收的数据包音频数据与上述同步数据库63内存储的音频信号进 行比较,判断是否有相关信息的同步分析部61;存储有事先制作的动作效果数据 的动作效果数据库64;从上述同步数据库中接收由上述同步分析部61判断为与播 放中的部分一致的同步用音频信号所对应的动作效果指示数据,在从上述动作效果 数据库64中获取指示的动作效果数据后,以此为
基础将用于控制驱动设备的动作 效果信号提供给驱动设备的动作效果生成部62。
在这里,上述同步数据库63的数据是指事先提取的要播放的一般AV媒体的 音频数据中所要
位置的音频数据,以及对必须在播放相关音频数据的时点进行实施 的动作效果进行定义的动作效果指示数据。它意味着如果替代要播放的AV媒体即 一般AV盘41的话,已存储的同步数据库63将毫无用武之地。
因此,为适合普通AV盘41,开发公司对需要动作效果的时点的音频部分进行 取样,另行生产销售已生成相应动作效果指示数据的同步数据库用专用盘(大部分 指数字数据CD盘)42。为此,还可向上述动作效果提供装置60附加用于播放上述 专用盘42的媒体播放部65,或者也可通过个人电脑提供该信息,进而附加为此的 通信设备。因此,上述同步数据库63用可更新内容的
硬盘来完成。如果上述硬盘 有空余空间的话,可通过动作效果数据库64内所存储的动作效果数据也就是特定 文件的集合来构成,将其存储在一定区域。
即,为利用音频信号使播放的一般AV媒体的进行过程和动作效果同步化,需 要对要播放的AV媒体的音频信号进行事先分析取样的资料及相应的动作效果指示 数据,所以每当购买新AV媒体时都要按专用盘状态或信息数据状态,求购为此制 作的同步数据库用数据。而且,每当更换AV媒体时都要掌握同步数据库中是否存 在相关的数据,如果没有就必须更新内容。
另外,由于利用的是音频信号,所以如果AV内容中类似的音频信号被使用的 部分存在的话,则会产生判读错误,而且当用户变化AV播放位置时,为进行相应 于变化的新AV进行位置的同步化,还需要数秒钟的检索时间,从而为查找所要的 场面会在前进或后退一点时产生很多操作迟延问题。
而且,这里所使用的音频信号是符合特定格式的数字音频信号,其限制在于 必须通过解码器区分成数据包单位。如果说将一般的模拟音频信号用作同步数据的 话,必须比较非静态时点的规定期间里的音频数据,因而造成对从哪里到哪里进行 比较模糊不清,且需要较长的比较时间,从而难以进行快速检索,产生实际应用困 难的问题。
即便说获得被区分成数据包的音频信号,并将其与同步数据库的音频数据进 行比较,但还是应该尽可能地减少处理时间,所以上述同步分析部必须由高性能信 号处理器构成。由于利用的是硬盘,所以为实施数据的输入/输出控制,不仅还需 要额外的控制部,而且当附加媒体播放部时,还必须进行控制它将数据移到硬盘上 的工作,这样会产生上述控制部的负担加重的问题。
即,原有动作效果提供系统是按家庭或少数人员能感受到虚拟真实感而进行 设计的,但在其设计理念上是用同步设备来利用数字音频信号的,因而这方面的处 理工作十分复杂,系统实现
费用极高。而且如上所述,如果新的AV盘面世,则必 须额外购买晚些时候才能提供的专用盘或数据,从而会产生需要不断追加费用的问 题。
下面参照附图对如上所述的本发明的利用视频信号的动作效果提供系统及其 方法的实施例进行详细说明。
图3是本发明第1实施例的系统构成例概念图。如图所示,该系统包括以下 几个组成部分:按照与一般AV媒体相同的格式,视频数据内包含动作效果信息的 三维立体AV盘100;由可播放包括上述三维立体AV盘100在内的标准AV盘的一 般AV播放部200、一般显示部和音响产生部300构成的基本AV观赏装置;从上述 一般AV播放部200的输出视频信号中提取出动作效果信息,在此基础上输出用于 完成动作效果的驱动控制信号的动作效果提供装置400;利用从上述动作效果提供 装置400中提供的驱动控制信号,向用户提供物理刺激的数个驱动部550a-d;恰 当驱动上述数个驱动部的驱动部控制与驱动信号生成部500。
在这里,可向用户提供物理刺激的驱动设备(包括:驱动部控制与驱动信号 生成部500、驱动部550a-d)适用于用户在观赏席上收听收看AV,可三维移动上 述观赏席,从而提高真实感。为此,上述驱动设备(500、550a-d)可安装在观赏 席和观赏席
支撑部(腿)上,虽然图3以与观赏席分离的状态显示了动作效果提供 装置400,但也可安装在上述动作效果提供装置400也就是上述观赏席内部。
通过上述构成,用户可以一边收听收看播放三维立体AV盘100时的视频影像 和音响,一边在提供与视频影像活动同步的三维动作效果的观赏席上感受生动逼真 的虚拟真实感。
图4是图3所示的动作效果提供系统结构详细方块图。如图所示,为向用户 提供三维立体AV环境,上述动作效果提供装置400负责向由驱动部控制与驱动信 号生成部500及数个驱动部550a-d构成的驱动设备提供驱动控制信号,从上述动 作效果提供装置的结构上看,它包括以下几个组成部分:对一般AV播放部200的 输出视频信号进行分析,检查有无在用户不能认知的情况下插入在相关视频信号中 的动作效果信息(即:用于指示动作效果的数据),提取出相关数据的动作效果数 据提取部410;为生成三维立体AV视频信号,存储着已被标准定义的数个动作效 果数据的动作效果数据库420;以从上述动作效果数据提取部410中提取的动作效 果指示数据为基础,从上述动作效果数据库420中获取指示的动作效果数据,输出 已变化的驱动设备控制信号的动作效果生成部430。
在这里,上述动作效果数据库420是存储有标准化动作效果数据的部分,因 此基本上可以利用非挥发性
存储器。当面对追加或改变(Version up:版本升级) 标准化的动作效果时,也可利用可记录的非挥性存储器(例如:闪存等)。这种单 纯用于获取数据的存储器即使利用低端(low-end)
控制器,也能快速获取数据, 所以可减轻上述动作效果数据提取部410或动作效果生成部430中的一个或全部可 包含的控制设备的负担。
上述动作效果数据提取部410接收以一般视频信号(NTSC/PAL,SVHS)或者 数字视频信号(VGA,SVGA,XGA等)形式提供的AV播放部200的视频输出,在用 户不能认知的情况下提取出隐藏的动作效果指示数据。这一部分随着将动作效果指 示数据插入在一般视频信号中的各种实施例不同会有很大变化。即,当使用需要复 杂演算的方法时,可使用包含
数字信号处理器在内的构成,当使用比较简单的方法 时,仅用单纯的微型控制器就可进行所有的工作。
而且,动作效果生成部430可容纳在上述动作效果数据提取部410所包含的 控制器内。在这里,可从上述动作效果数据库420中获取按规定号码罗列的动作效 果数据中的一个,对其进行适当改变。图4显示了这个例子。
图5是从动作效果数据库420的构成及上述动作效果生成部430中获取其中 一个动作效果数据并对其进行适当变化的例子。
如图5中的(a)所示,上述各个动作效果数据由显示规定
波形的数字数据构 成,简单地说也可看作单纯的波形文件(.WAV)。即指由适当的取样
频率构成的连 续变位值的集合,其长度及取样频率可按照设计者的意图及驱动部的操作性能而 定。
图5中的(b)至图5中的(e)是将其中的一个(例:编号为3的数据)动 作效果的波形文件变
化成简单的变位值的示意图。它适当地标示出了调节长度的时 间比率值和调节振幅的大小比率值,从结果上看所显示的动作效果存在较大的差 异,这意味着能够向用户提供更加细腻而多样的物理刺激。
图6是上述本发明构成所核心使用的动作效果指示数据概略构成形态示意图, 值得注意的是它可按照设计者的意图或标准化政策用极其多样的格式来决定。
图6中的(a)是适合图4所示的本发明结构的简单形态的动作效果指示数据 格式600。它包括以下几个组成部分:显示是动作效果指示数据的索引字段(Index Field)610;显示所要的标准动作效果数据种类和驱动设备种类的字段(动作效果 编号)620;有关调节上述标准动作效果数据的值的字段(时间/大小)630;有关 用于补正误差的奇偶(parity)值或误差补正代码(ECC)的字段(误差补正)640。 此外也可列入用于细微调节的有关延迟时间或渐显(fade in)、渐弱(fade out) 等的指示值,同时也可删掉其中不需要的数据。另外,当利用数个驱动设备时,一 个动作效果指示数据格式内也可罗列用于各自驱动设备的指示值,为了交叉的动 作,一个动作效果指示数据格式内也可只记录用于一个驱动设备的数据。
图6中的(b)是动作效果指示数据内部未
指定标准动作效果数据而是用动作 效果数据字段625来表示用于直接动作效果的波形数据本身的示意图。如果使用这 种动作效果指示数据,则会减少数据库用于存储标准动作效果数据的必要性,但为 了进行更加有效的驱动,最好仅在特殊的情况(用于附加标准动作效果里所没有的 由用户定义的效果的情况)下用作有选择支持的格式。
因此,通过已经说明的动作效果提供装置400来获取并解析上述动作效果指 示数据600,并以此控制驱动设备是本发明的基本驱动原理之一。
在这里,有一点值得关注:通过上述实施例的构成可知,指示着动作效果种 类和提供方法(包括提供标准动作效果的时间或其强度等的变化)的动作效果指示 数据被插入在视频信号中,由此要播放的AV媒体(例如:图示的三维立体AV盘 100)内必须能够存储插入有这种动作效果指示数据的视频数据,而且必须能够通 过一般AV播放部200正常播放它。
即,在本发明中,不管三维立体AV盘100的种类是一般CD(VCD)、DVD、还 是BD都无关紧要,通过规定的一般AV播放部200播放的视频信号内必须插入并提 供动作效果指示数据,并且必须使用户不能对它有所察觉,能够与本发明动作效果 提供装置毫无相关地进行正常播放。
换句话说,本发明可通过能继续容纳目前一直使用的AV播放部200的普通系 统进行操作,它可提供的最大优点在于能够包括由高价的AV播放部200、显示部 和音响产生部300构成家庭影院的用户。
为此,本发明提出了为使用户不能认知在标准视频规格内包含动作效果指示 数据的许多方法。
图7是本发明第1实施例的三维立体AV媒体生成方法,是在用户不能认知的 情况下将动作效果指示数据插入在普通影像数据中的一种方法说明概念图。
如图7中的(a)、(b)所示,它采用的方法是:在向提供有影像数据的许多 画面图像(image)中的一个图像内插入水印(watermark)后,用插入水印的图像 代替原本影像数据图像。虽然存在着生成水印的各种运
算法则(algorithm),但基 本情况是:利用大部分特定
键盘(秘密键)值,按隐藏信息(hidden data)插入 有关著作权信息,生成带有水印的图像,再利用上述特定的键盘值,可从有水印的 图像中获取上述隐藏的信息。由于隐藏在这种带有水印的图像中的特定信息不会被 观察者认知,所以如图7所示,当向瞬间经过的一个画面
帧内插入带有水印的图像 时用户不会察觉到。
但是,动作效果提供装置400的动作效果数据提取部410必须确认瞬间经过 的图像是否是带有水印的图像。上述动作效果数据提取部410一边将输出的视频信 号转换成个别数字画面图像,一边检测并提取视频信号中插入的带有水印的动作效 果指示数据,为此,它包含水印解码器。此外,上述动作效果数据提取部410在内 部将模拟图像(NTSC/PAL,SVHS)等转换成数字数据,获取一个数字图像信息,然 后利用特定键盘(秘密键)值,判断有关图像是否带有水印,或者可需要数字信号 处理器在短时间内提取出隐藏的数据(即:动作效果指示数据)。由于一般的视频 信号包含有采用扫描线(scan line)方式的图像信号和垂直同步信号,所以在完 全获取一个图像数据后,直到获取下一个图像前有一些空余时间。而且,由于不从 带有水印的图像中提取隐藏的数据,而是额外存在着可单纯检测出带水印与否的运 算法则,所以当利用它时,能够毫无拖延地检测出动作效果指示数据是否已插入在 瞬间进行的帧图像中。
如果所提供的视频信号是数字视频信号,则没有必要将上述该图像转换成数 字数据,因而可原样利用接收的数字影像数据。另外,通过比较简单的元件就可对 模拟视频信号和数字视频信号进行相互转换,所以所提供的视频信号种类不会对本 发明构成限制。
如果按上述说明的方式监测视频信号继而检测出带有水印的图像的话,那么 可以从带有水印的图像中获取动作效果指示数据,以此按相应的动作效果来驱动驱 动部。
图8是为说明本发明提出的另一动作效果指示数据插入方法而提出的一般模 拟视频信号的构成示意图,这里图示了NTSC方式的视频信号。但是,PAL方式也 仅是扫描线图形不同,而大部分类似。SVHS方式的视频信号也只是通过分离同步 信号和
颜色信号来提高画质的,很容易将其转换成NTSC/PAL信号,因而下面仅对 图示的NTSC方式的视频信号进行说明。
图8中的(a)是画面上所显示的水平扫描线的实际信号模样示意图,图示的 一个周期信号(Hdata)具有一个水平线图像信息(Idata)。这种一个周期信号 (Hdata)也有一部分附加着用于水平线同步化的水平同步信号(Hsyn)和相关水 平线的彩色信号等。此外,虽然未图示,但也存在着前沿(front porch)和后沿 (back porch)部分。在这里,显示在实际画面上的一条线的图像是指水平线图像 信息(Idata)部分,通常具有约52μs的长度。在这段时间内,用连续的模拟值 表示对一条线的
像素(pixel)数据。这种信号如果除与色同步(color burst)信 号的相互关系外,将单指
亮度(brightness)值。因此,如果将52μs的时间看作 画面横轴坐标指定的范围,将决定规定时间所对应的坐标位置。如果将与属于52μ s的任意一时点相关的模拟值强制变换成与红色值相关的
电压,或者变换成与白色 值相关的电压的话,画面上将出现相关亮度的点,通过它可以将特定的水平(level) 数据显示在实际显示画面上,进一步发展这种技术(technique)就是屏幕显示 (OSD)。
因此,可按恰当的时间长度利用数字-模拟变换设备插入所要的数据而非所要 的水平线的图像,这样就可将动作效果指示数据变换成
模拟信号进行插入。从对此 进行判读的情况看,在通过水平同步信号(Hsyn)的图形(figure)对特定水平线 信号进行判断后,如果说在判读时点以相关水平同步信号(Hsyn)为基准,按所希 望的取样时间间隔对所要的数据进行取样的话,那么从一个周期的水平线信号 (Hdata)读取所包含的信号值,用模拟-数字变换设备对其进行变换,就可获取 所插入的动作效果指示数据。
图8中的(b)是在用一对奇数帧和偶数帧制作一个画面的视频数据中奇数/ 偶数帧中一个帧的信号构成示意图。如图所示,用于垂直同步的一定长度的垂直同 步信号(Vsyn)和用于构成一个帧画面(Fdata)的水平信号(Hdata)从画面上端 朝下端方向罗列着,各水平信号(Hdata)的构成如图7。这里值得关注的部分是 一个帧数据(Fdata)不全部显示在画面上。即,在一个帧数据(Fdata)中,虽然 画面上端的一部分水平线数据(Inr1)和画面下端的一部分水平线数据(Inr2)包 含在视频信号内,但并不显示在实际画面上。目前,空中波广播这一部分含有时间 信息,且一部分字幕(caption)视频含有字幕数据。
因此,如上所述,当采用将数据插入画面图像区域中的一部分区域的方法来 插入动作效果指示数据时可知,或者可将相关数据插入在实际画面上所显示区域的 水平图像信号中,或者可将相关数据插入在实际画面上所不显示区域的水平图像信 号中。尤其是,由于数十字节(bite)以上的数据可插入在一条水平线信号中,所 以数十至数百字节的动作效果指示数据可插入在一两条左右的水平信号中。
图9是指本发明其他实施例的三维立体AV媒体生成方法,为了在用户不能认 知的情况下将动作效果指示数据插入在普通影像数据中,下面利用上述图8所说明 的方法之一。
即,图9所示的方法是指:由于许多帧(1F1-1Fn)构成一个场面的视频信号, 所以在构成它的一个帧的图像中将动作效果指示数据插入在画面的一部分区域,尤 其是用户难以认识的画面界限部分。籍此能够仅在用户几乎无法认知的时间里将动 作效果指示数据插入在显示画面的一部分水平信号中。尤其是,瞬间提供的动作效 果指示数据插入部分是毫无任何意义的单纯噪音(noise),由于在用户视线不集中 的部分瞬间出现,所以不会引起用户的觉察。
图10是指与上述图9类似的方法,但该方法可适用于一边由一般AV播放部 播放AV媒体,一边以媒体的视频数据为基础生成并输出包含画面未显示区域信号 在内的视频信号的情况。
即,如图所示,该方法是指将动作效果指示数据插入在用于显示一个画面的 奇数/偶数字段的构成上位于实际视频显示区域上下部(垂直同步区域)的未显示 区域中的方法,它能够插入所要的数据而不会使画质降低,并且能够对已从空中波 或其他标准中脱离出使用区域的空余区域加以利用,必要时也可不顾这种现存标准 进行插入,这是因为当利用特定欣赏用媒体时与空中波或其他标准发生冲突的可能 性小。
图11是用于提取上述图9或图10所示的动作效果指示数据的动作效果数据 提取部简单构成例示意图。从图可知,仅用图示的比较简单且低廉的硬件就可从视 频信号中提取出动作效果指示数据。
首先,同步提取器411对一般AV播放部输出的视频信号进行分析,提供垂直 同步信号和水平同步信号以及区分奇数/偶数字段的信号。为了能够用作多种目的, 可以利用最常用的普通视频同步提取器。
如果利用计算器412来计算上述被提取的同步信号,可知道所要位置的水平 同步信号的开始时点。因此,ADC和数据提取部413可知位置或特
定位置范围。
上述ADC和数据提取部413按照上述计算器412的信号来分析视频信号,将 模拟亮度信号转换成数字数据,然后利用这一转换的数字数据来检测显示是动作效 果指示数据的索引信息,如果检测出索引,则可按已设定的格式提取所有后续的动 作效果指示数据。因此,上述ADC和数据提取部413也可以是简单的具有ADC功能 的普通微型控制器,也可包含上述计算器412的功能。
图12是本发明第1实施例用于生成三维立体AV媒体的个人电脑用动作效果 编辑器700示意图。图示的用户
接口是用于基本编辑的,即可进一步细分又可附加 许多功能。虽然编辑的概念也可多种多样,但这里是指可单纯通过画面帧按一定时 间单位来编辑动作效果的。
上述动作效果编辑器700是一般用户或出售AV媒体的企业为把特定影像制作 成支持三维立体AV媒体而使用的。如果放映特定影像,影像将按各帧显示在视频 流显示区域710,用户通过调节它来决定所要的动作效果指示数据的插入位置。
为了能够以这一被决定的动作效果指示数据的插入帧位置为基准来编辑规定 时间内的效果,选择下端罗列的动作效果,添加在用于提供各驱动设备(这里是指 4个个别驱动设备)编辑区域的动作效果编辑区域720上,然后通过调节大小和长 度就可编辑动作效果。
向上述下端动作效果选择区域730提供的动作效果通过视觉可以看见标准动 作效果数据。
如果利用上述设备决定所要的插入位置和所要的动作效果及动作效果变化值 的话,则利用前面所述的方法中的一个在用户不能认知的情况下将其插入在上述帧 影像中。
在全部结束这种过程后,将具有上述变化的帧影像存储成适应特定媒体(例 如:VCD、DVD、BD等)形式的专用视频数据,然后将其记录在相关媒体上。另外, 也可将这种编辑的内容提取成动作效果指示数据和插入位置信息,通过额外的文件 进行管理。这种生成的媒体支持三维立体AV,同时通过一般AV播放部也可毫无异 常地进行播放。
不仅AV影像媒体销售者而且具有可记录特定媒体设备(CD记录器、DVD记录 器、BD记录器)的个人都可生成上述三维立体AV媒体,并且提取成额外文件的动 作效果指示数据和插入位置信息也可通过许多路径共享。
图13是当播放通过上述过程生成的三维立体AV媒体时向一般播放环境附加 的动作效果提供装置及驱动设备的动作过程顺序图。
S1-S3,如图所示,首先,如果通过一般AV播放部播放三维立体AV媒体的 话,则输出可用一般显示部欣赏的视频信号,然后动作效果提供装置获取它,在内 部动作效果数据提取部对视频信号进行分析。
S4-S8,对视频信号的分析是仅优先判断动作效果指示数据插入与否,如果 判断出动作效果指示数据插入与否,则对接在其标准的索引信息后的动作效果指示 数据进行提取和分析,制作成可以加以利用的数据。依靠相关数据中用于指示标准 动作效果的内容,对上述动作效果提供装置所具有的动作效果数据库进行检索,获 取所要的标准动作效果数据。如果数据库中不存在指定的动作效果数据时,则完全 不顾相关动作效果指示数据。
上述过程反复进行直到相关的三维立体AV媒体播放结束,通过分析视频信号 来确认是否是有效的视频信号(各种同步信号)就可知道结束与否。
如上所述的本发明在用户不能认知的情况下将指示动作效果的数据插入在提 供动作效果的AV影像自身中,从而无需额外的同步化过程,并且只用比较简单的 硬件就可获取插入在影像中的动作效果指示数据,向用户提供毫无迟延的物理刺 激。另外,没有必要为体验本发明所提供的虚拟真实感而更换已经使用中的AV播 放系统,对AV播放系统的种类也没有过多要求,因而其适用范围非常宽,可确保 广泛的用户层。
本技术领域中的普通技术人员应当认识到,以上的实施例仅是用来说明本发 明,而并非用作为对本发明的限定,只要在本发明的实质精神范围内,对以上所述 实施例的变化、变型都将落在本发明
权利要求书的范围内。