分发控制系统、分发系统和分发控制方法
阅读：1024发布：2020-07-14
专利汇可以提供分发控制系统、分发系统和分发控制方法专利检索，专利查询，专利分析的服务。并且一种分发控制系统，包括生成单元，配置为从内容数据生成图像数据；裁出单元，配置为裁出所述图像数据的部分；转换单元，配置为将裁出的图像数据转换为传送数据；以及传送单元，配置为将所述传送数据传送至通信终端。，下面是分发控制系统、分发系统和分发控制方法专利的具体信息内容。
1.一种分发控制系统，包含：
生成单元，配置为从网络服务器获取内容数据，以及从内容数据生成静态图像数据；
指定单元，配置为从至少一个通信终端处接收关于在所述静态图像数据中要裁出的区域的坐标，并基于所接收的坐标来指定在所述静态图像数据中要裁出的区域，其中所述要裁出的区域为由在显示屏幕上的用户操作指定的所述至少一个通信终端的显示屏幕的显示区域的用户定义的部分，所述显示屏幕为触摸板，以及所述用户操作包括用于扩展或紧缩由用户的指尖在触摸板上定义的两点之间的距离的捏紧操作，以及所述坐标包括所述两点的坐标；
裁出单元，配置为裁出对应于所指定的裁出区域的所述静态图像数据的部分；
尺寸调整单元，配置为将所述静态图像数据的所述裁出区域的尺寸调整为对应于所述静态图像数据的尺寸；
转换单元，配置为将尺寸调整过的所述静态图像数据的裁出区域转换为传送数据；以及
传送单元，配置为将所述传送数据传送至所述至少一个通信终端。
2.根据权利要求1的分发控制系统，其中
所述生成单元为渲染器，配置为通过渲染所述内容数据而生成所述静态图像数据的帧数据；
所述裁出单元配置为从所述帧数据中裁出部分图像区域，并生成裁出图像的帧数据；
并且
所述转换单元为编码器，配置为通过对所述裁出图像的帧数据进行编码而将所述裁出图像的帧数据转换为要通过通信网络传送的所述传送数据。
3.根据权利要求1的分发控制系统，其中
所述生成单元配置为生成通过合并多个内容数据片段而获得的单个帧数据片段，并且所述裁出单元配置为从所述帧数据中裁出部分图像区域，并生成所述裁出图像的帧数据。
4.根据权利要求1的分发控制系统，其中
所述生成单元为网络浏览器，并且
所述转换单元包括编码器，配置为针对由所述网络浏览器生成的帧数据执行编码。
5.根据权利要求4的分发控制系统，其中
所述生成单元为允许实时通信的网络浏览器，并且
所述编码器配置为针对由所述网络浏览器生成的帧数据执行实时编码。
6.一种分发系统，包含：
根据权利要求1至5的任一个所述的分发控制系统；以及
通信终端。
7.一种分发控制方法，用于将从内容数据生成的静态图像数据转换为传送数据，并将所述传送数据传送至多个通信终端，该分发控制方法包含：
从网络服务器获取内容数据；
从内容数据生成静态图像数据；
从至少一个通信终端处接收关于在所述静态图像数据中要裁出的区域的坐标，其中所述要裁出的区域为由在显示屏幕上的用户操作指定的所述至少一个通信终端的显示屏幕的显示区域的用户定义的部分，所述显示屏幕为触摸板，以及所述用户操作包括用于扩展或紧缩由用户的指尖在触摸板上定义的两点之间的距离的捏紧操作，以及所述坐标包括所述两点的坐标；
基于所接收的坐标来指定在所述静态图像数据中要裁出的区域；
裁出对应于所指定的裁出区域的所述静态图像数据的部分；
将所述静态图像数据的所述裁出区域的尺寸调整为对应于所述静态图像数据的尺寸；
将尺寸调整过的所述静态图像数据的裁出区域转换为所述传送数据；并且将所述传送数据传送至所述至少一个通信终端。
分发控制系统、分发系统和分发控制方法
技术领域
背景技术
[0003] 因特网上携带的网络内容为了响应多种需求的目的而被丰富化。因此，使用用于通过因特网来使用服务的通信终端来访问丰富化的内容引起通信终端上的负荷不适当地很高的问题。
[0005] 即使利用该瘦客户端技术，仍然存在高负荷施加于通信终端来访问丰富化的内容的问题。
发明内容
[0006] 本发明的目标在于至少部分地解决传统技术的问题。
[0007] 根据一个实施例，提供了一种分发控制系统，其包括生成单元，配置为从内容数据生成图像数据；裁出单元，配置为裁出该图像数据的部分；转换单元，配置为将裁出图像数据转换为传送数据；以及传送单元，配置为将该传送数据传送至通信终端。
[0008] 根据另一实施例，提供了一种分发系统，其包括根据以上实施例的分发控制系统；以及通信终端。
[0009] 根据另一实施例，提供了一种分发控制方法，用于将从内容数据生成的图像数据转换为传送数据并将该传送数据传送至多个通信终端。该分发控制方法包括裁出图像数据的一部分；并将裁出图像数据转换为传送数据。
附图说明
[0011] 图1为根据一个实施例的分发系统的示意图；
[0012] 图2为当加密狗连接于通信终端时的概念性示图；
[0013] 图3为说明基本分发方法的概念性示图；
[0014] 图4为多点传送的概念性示图；
[0015] 图5为多重显示的概念性示图；
[0016] 图6为通过分发控制系统使用多个通信终端的组合式分发的概念性示图；
[0018] 图8为加密狗的硬件配置图；
[0019] 图9为主要说明分发控制系统的功能的功能框图；
[0020] 图10为主要说明通信终端的功能的功能框图；
[0021] 图11为说明终端管理系统的功能的功能框图；
[0022] 图12为分发目的地选择菜单屏幕的概念性视图；
[0023] 图13为终端管理表的概念性视图；
[0024] 图14为可用终端管理表的概念性视图；
[0025] 图15为编码器桥单元的详细示图；
[0026] 图16为说明转换器的功能的功能框图；
[0028] 图18为说明分发控制系统的基本分发处理的顺序图；
[0029] 图19为说明通过分发控制系统使用多个通信终端的通信处理的顺序图；
[0030] 图20为说明时间调整的处理的顺序图；
[0031] 图21为说明针对从分发控制系统传送至通信终端的数据的通道适配控制的处理的顺序图；
[0032] 图22为说明针对从通信终端传送至分发控制系统的数据的通道适配控制的处理的顺序图；
[0033] 图23为说明多重显示处理的顺序图；
[0034] 图24为说明多重显示处理的顺序图；而
[0035] 图25为说明多重显示处理的顺序图。
具体实施方式
[0036] 以下参考附图描述的是根据实施例的分发系统1。以下详细描述的是如下发明：这使得网络浏览器(此后称为“浏览器”)和编码器两者在云中通过云计算相互协同地执行并传送视频数据、声音数据等至通信终端。
[0037] 下文中，“图像”包括静态图像以及运动图像。“视频”主要指代运动图像并还包括静止成为静态图像的运动图像。“静态图像(声音)”表示静态图像和声音中的至少一个。“图像(声音)”表示图像和声音中的至少一个。“视频(声音)”表示视频和声音中的至少一个。
[0038] 实施例的概要
[0039] 参考图1所描述的是根据本发明的实施例的概要。图1为根据本实施例的分发系统的示意图。
[0040] 系统配置的概要
[0041] 首先描述的是分发系统1的配置的概要。
[0042] 如图1所示，根据本实施例的分发系统1包括分发控制系统2、多个通信终端(5a至5f)、终端管理系统7以及网络服务器8。下文中，通信终端(5a至5f)中的任意通信终端可称为“通信终端5”。分发控制系统2、终端管理系统7和网络服务器8均由服务器计算机实现。
[0043] 通信终端5为由接收分发系统1的服务的用户使用的终端。通信终端5a为笔记本型个人计算机(PC)。通信终端5b为移动终端，如智能电话或平板终端。通信终端5c为其中组合了复印、扫描、打印和传真功能的多功能外围设备/打印机/产品(MFP)。通信终端5d为投影仪。通信终端5e为具有照相机、麦克风以及扬声器的TV(视频)会议终端。通信终端5f为能够电子地转换用户绘制的绘图等的电子黑板(白板)。
[0044] 通信终端5不仅为如图1所示的终端，而且可为通过如因特网之类的通信网络而可通信的装置，包括手表、自动售货机、汽车导航装置、游戏控制台、空调、照明器材、照相机本身、麦克风本身以及扬声器本身。
[0045] 分发控制系统2、通信终端5、终端管理系统7和网络服务器8可通过包括因特网以及局域网(LAN)的通信网络9相互通信。通信网络9的示例可包括无线通信网络，如第三代移动通信(3G)，全球微波互联接入(WiMAX)和长期演进(LTE)。
[0046] 通信终端5中的例如通信终端5d不具有通过通信网络9与其他终端或系统通信的功能。然而，如图2所示，用户插入加密狗99至通信终端5d的接口(如通用串行总线(USB)或高清多介质接口(HDMI))，由此使得其能够与其他终端和系统相通信。图2为当加密狗附接于通信终端时的概念性示图。
[0047] 分发控制系统2在云中具有浏览器20，并通过在浏览器20中的渲染功能，获取以特定描述语言描述的单个或多个内容数据片段并在内容数据上执行渲染，由此生成包括如由红、绿、蓝(RGB)组成的位图数据之类的静态图像数据以及如脉冲编码调制(PCM)数据之类的声音数据的帧数据(即，静态图像(声音)数据)。该内容数据为从网络服务器8、任意通信终端等获取的数据，并包括超文本标记语言(HTML)和级联样式表单(CSS)格式的图像(声音)数据、MP4格式的图像(声音)数据(MPEG-4)以及高级音频编码(AAC)格式的声音数据。
[0048] 分发控制系统2在云中具有编码单元19，而该编码单元19扮演编码器的角色，由此将作为静态图像(声音)数据的帧数据转换为如H.264(MPEG-4AVC)、H.265和运动JPEG之类的压缩编码格式的视频(声音)数据。
[0049] 终端管理系统7在通信终端5上执行登录认证并管理通信终端5的合约信息等。终端管理系统7具有简单邮件传送协议(SMTP)服务器的功能，用于传送电子邮件。终端管理系统7可例如实现为在云服务(IaaS：基础设施即服务)上开发的虚拟机。希望的是，终端管理系统7运行于复用方式，以在意外事件的情况下提供服务连续性。
[0050] 浏览器20使能实时通信/协作(RTC)。分发控制系统2包括在以下描述的图16中的编码单元19，而编码单元19可针对由浏览器20输出的帧数据执行实时编码并输出通过兼容于H.264标准等的转换而生成的视频(声音)数据。因此，分发控制系统2的处理例如不同于其中记录于DVD中的非实时视频(声音)数据被DVD播放器读取和分发的情况下的处理。
[0051] 不仅分发控制系统2，而且通信终端5也可具有浏览器。在这种情况下，更新分发控制系统2的浏览器20不再需要启动相应的通信终端5的浏览器。
[0052] 多种分发方法的概要
[0053] 接下来描述都是多种分发方法的概要。
[0054] 基本分发
[0055] 图3为说明基本分发方法的概念性示图。在分发系统1中，如图3所示，分发控制系统2的浏览器20获取网络内容数据[A]作为来自网络服务器8的图像(声音)数据并对其进行渲染，由此生成帧数据[A]片段作为静态图像(声音)数据。包括编码单元19的编码器桥单元30针对帧数据[A]片段执行编码等，由此以如H.264之类的压缩编码格式将其转换为视频(声音)数据[A](传送数据的示例)。分发控制系统2将转换的视频(声音)数据[A]分发至通信终端5。
[0056] 因此，分发控制系统2甚至还可将丰富的网络内容数据分发至通信终端5，同时在云中将其从HTML等的网络内容数据转换为H.264等的压缩视频(声音)数据。因此，通信终端5可平滑地再现该网络内容，而没有用于增加最新浏览器或合并更高配置的中央处理单元(CPU)、操作系统(OS)、随机存取存储器(RAM)等的时间和开销。
[0057] 网络内容的未来丰富仅需要在云中的分发控制系统2的浏览器20、CPU等的更高配置，而不需要通信终端5的更高配置。
[0058] 应用上述分发方法，如图4至图6所示，分发系统1还可分发网络内容数据至多个站点作为视频(声音)数据。以下描述为图4至图6中所示的分发方法。
[0059] 多点传送
[0060] 图4为多点传送的概念性示图。如图4所示，分发控制系统2的单个浏览器20从网络服务器8获取网络内容数据[A]作为图像(声音)数据并对其进行渲染，由此生成帧数据[A]片段作为静态图像(声音)数据。编码器桥单元30编码帧数据[A]片段，由此将其转换为视频(声音)数据。然后分发控制系统2分发视频(声音)数据[A](传送数据的示例)至多个通信终端(5f1，5f2，5f3)。
[0061] 因此，同一视频(声音)在站点中再现。在这种情况下，通信终端(5f1，5f2，5f3)不需要具有相同级别的显示再现性能(例如，同一分辨率)。类似于此的分发方法称为，例如，“多点传送”。
[0062] 多重显示
[0063] 图5为多重显示的概念性示图。如图5所示，分发控制系统2的单个浏览器20从网络服务器8获取网络内容数据[XYZ]作为图像(声音)数据并对其进行渲染，由此生成帧数据[XYZ]片段作为静态图像(声音)数据。编码器桥单元30将每一个帧数据[XYZ]划分为多个帧数据片段([X]，[Y]，[Z])并将其编码，由此将其转换为多个视频(声音)数据片段([X]，[Y]，[Z])。分发控制系统2随后分发视频(声音)数据[X](传送数据的示例)至通信终端5f1。类似地，分发控制系统2分发视频(声音)数据[Y](传送数据的示例)至通信终端5f2并分发视频(声音)数据[Z](传送数据的示例)至通信终端5f3。
[0064] 因此，例如，即使对于风光(landscape)网络内容[XYZ]，视频(声音)也以划分的方式由通信终端5再现。因此，当通信终端(5f1，5f2，5f3)安装于线路时，可获取与一个大视频片段的再现相同的效果。在这种情况下，通信终端(5f1，5f2，5f3)需要具有相同级别的显示再现性能(例如，相同分辨率)。类似于此的分发方法例如称为多重显示。
[0065] 组合式分发
[0066] 图6为通过分发控制系统使用多个通信终端的组合式分发的概念性示图。如图6所示，作为电子黑板的通信终端5f1以及作为电话会议终端的通信终端5e1在第一站点处(图6右侧)使用，而在第二站点处(图6左侧)，作为电子黑板的通信终端5f2以及作为电话会议终端的通信终端5e2类似地使用。在第一站点处，电子笔P1用于在通信终端5f1上使用笔画来绘制字符等。在该第二站点处，电子笔P2用于在通信终端5f2上使用笔画来绘制字符等。
[0067] 在第一站点处，通过通信终端5e1获取的视频(声音)数据由编码单元60编码，并传送至分发控制系统2。其后，其由分发控制系统2的解码单元40解码并随后输入到浏览器20。表示使用电子笔P1在通信终端5f1上绘制的笔画的操作数据(在这种情况下，是通信终端
5f1的显示器上的坐标数据等)被传送至分发控制系统2以被输入至浏览器20。还是在该第二站点处，通过通信终端5e2获取的视频(声音)数据由编码单元60编码并传送至分发控制系统2。其后，其由分发控制系统2的解码单元40解码并随后输入至浏览器20。表示使用电子笔P2在通信终端5f2上绘制的笔画的操作数据(在这种情况下，通信终端5f2的显示器上的坐标数据等)传送至分发控制系统2以被输入至浏览器20。
5f1的显示器上的坐标数据等)被传送至分发控制系统2以被输入至浏览器20。还是在该第二站点处，通过通信终端5e2获取的视频(声音)数据由编码单元60编码并传送至分发控制系统2。其后，其由分发控制系统2的解码单元40解码并随后输入至浏览器20。表示使用电子笔P2在通信终端5f2上绘制的笔画的操作数据(在这种情况下，通信终端5f2的显示器上的坐标数据等)传送至分发控制系统2以被输入至浏览器20。
[0068] 浏览器20从网络服务器8例如获取网络内容数据[A]作为在通信终端(5f1，5f2)的显示器上显示的背景图像。浏览器20组合网络内容数据[A]、操作数据([p1]，[p2])和视频(声音)内容数据([E1]，[E2])，并对其进行渲染，由此生成帧数据片段作为静态图像(声音)数据，其中内容数据片段([A]，[p1]，[p2]，[E1]，[E2])以期望的布局来布置。编码器桥单元30编码该帧数据片段，而分发控制系统2将表示相同内容([A]，[p1]，[p2]，[E1]，[E2])的视频(声音)数据分发至两个站点。在第一站点处，视频([A]，[p1]，[p2]，[E1(视频部分)]和[E2(视频部分)])在通信终端5f1的显示器上由此显示，而声音[E2(声音部分)]输出自通信终端5e1的扬声器。而且在该第二站点处，视频([A]，[p1]，[p2]，[E1(视频部分)]和[E2(视频部分)])在通信终端5f2的显示器上显示，而声音[E1(声音部分)]输出自通信终端5e2的扬声器。在第一站点处，站点自身的声音[E1(声音部分)]由于通信终端5f1的回声消除功能而没有被输出。在该第二站点处，站点自身的声音[E2(声音部分)]由于通信终端5f2的回声消除功能而没有被输出。
[0069] 因此，在第一站点和第二站点处，可以执行远程共享处理，其在远程站点处实时共享相同信息，因此使得根据本实施例的分发系统1在电话会议等中有效。
[0070] 实施例的详细描述
[0071] 以下参考图7至图25详细描述实施例。
[0072] 实施例的硬件配置
[0073] 首先参考图7和图8的描述为本实施例的硬件配置。图7为分发控制系统、通信终端、终端管理系统以及网络服务器的硬件配置示图。图8为加密狗的硬件配置示图。因为与通信终端的通信有关的硬件配置与通信终端的硬件配置的部分相同，因此将省略其描述。
[0074] 如图7所示，分发控制系统2包括：CPU201，其控制分发控制系统2的整体操作；只读存储器(ROM)202，在其中存储如IPL之类的用于驱动CPU201的程序；RAM203，用作CPU201的工作区域；HDD204在其中存储如程序之类的各种数据；硬盘控制器(HDC)205，其在CPU201的控制下控制从HDD204读取各种类型的数据以及将各种类型的数据写入HDD204；介质驱动207，其控制从如flash存储器之类的存储介质206读取数据以及将数据写入该存储介质
206；显示器208，其显示各种信息；接口(I/F)209，其通过通信网络9传送数据并且加密狗99与其连接；键盘211；鼠标212；麦克风213；扬声器214；图形处理单元(GPU)215；以及如地址总线或数据总线之类的总线220，用于电气地连接上述组件，如图7所示。由于通信终端5d作为投影仪，因此可以不提供GPU。因为终端管理系统7和网络服务器8的硬件配置与分发控制系统2的硬件配置相同，所以其描述将被省略。
206；显示器208，其显示各种信息；接口(I/F)209，其通过通信网络9传送数据并且加密狗99与其连接；键盘211；鼠标212；麦克风213；扬声器214；图形处理单元(GPU)215；以及如地址总线或数据总线之类的总线220，用于电气地连接上述组件，如图7所示。由于通信终端5d作为投影仪，因此可以不提供GPU。因为终端管理系统7和网络服务器8的硬件配置与分发控制系统2的硬件配置相同，所以其描述将被省略。
[0075] 接下来参考图8描述的是图2中所示的加密狗99的硬件配置。如图8所示，加密狗99包括：CPU91，其控制加密狗99的整体操作；ROM92，其中存储基本输入/输出程序；RAM93，用作CPU91的工作区域；电可擦除可编程ROM(EEPROM)94，其在CPU91的控制下执行数据的读写；GPU95；接口I/F96，用于到通信终端5的I/F209的连接；天线97a；通信单元97，其通过天线97a使用短距离无线技术执行通信；以及如地址总线或数据总线之类的总线90，用于电连接上述单元。短距离无线技术的示例包括近场通信(NFC)标准、蓝牙(注册商标)、无线高保真(WiFi)和ZigBee(注册商标)。因为加密狗99包括GPU95，所以即使当GPU未包括在通信终端5d中时，通信终端5也可利用如图2所示地附接的加密狗99执行图形显示所需的计算处理。
[0076] 实施例的功能配置
[0077] 实施例的功能配置接下来参考图9至图16来描述。
[0078] 分发控制系统的功能配置
[0079] 首先参考图9描述的是分发控制系统2的功能配置。图9为主要说明分发控制系统的功能的功能框图。图9说明了分发控制系统2将视频(声音)数据分发至通信终端5f1的功能配置，并且分发控制系统2在分发目的地不同于通信终端5f1的情况下也具有相同的功能配置。尽管分发控制系统2包括多个分发引擎服务器，但是以下描述了包括单个分发引擎服务器的情况，以简化描述。
[0080] 如图9所示，分发控制系统2具有图9由包括图7中所示的CPU201和程序的硬件配置实现的功能组件。
[0081] 具体地，分发控制系统2包括浏览器20、发送器/接收器21、浏览器管理单元22、传送先进先出(FIFO)缓冲器24、时间管理单元25、时间获取单元26、通道适配控制器27、编码器桥单元30、发送器/接收器31、接收FIFO34、识别单元35、延迟信息获取单元37a、通道适配控制器37b和解码单元40。分发控制系统2进一步包括由图7中所示的HDD204实现的存储单元2000。该存储单元2000在其中存储从识别单元35输出并通过浏览器管理单元22发送的识别信息(以下描述)。通过浏览器20获取的内容数据可暂时存储于存储单元2000作为缓存。
[0082] 在上述功能组件中，浏览器20为操作于分发控制系统2内的浏览器。浏览器20随着网络内容的丰富始终保持更新。浏览器20包括媒体播放器、Flash播放器、JavaScript(注册商标)、CSS和HTML渲染器。JavaScript包括标准化产品和专用于分发系统1的产品。
[0083] 媒体播放器为用于在浏览器20内再现如视频(声音)文件之类的多媒体文件的浏览器插件。Flash播放器为用于在浏览器20中再现flash内容的浏览器插件。专用JavaScript为提供专用于分发系统1的服务的应用编程接口(API)的JavaScript组。CSS为用于有效地定义以HTML描述的网页的外观和风格的技术。HTML渲染器为HTML渲染引擎。
[0084] 渲染器渲染如作为图像(声音)数据的网络内容数据之类的内容数据，由此生成帧数据片段作为静态图像(声音)数据。如图6所示，渲染器也是将多种内容([A]，[p1]，[p2]，[E1]，[E2])布局的布局引擎。
[0085] 根据本实施例的分发系统1在分发控制系统2中提供浏览器20，并且从浏览器20选择用于用户会话的云浏览器。如下描述了提供单个浏览器20的情况，以简化描述。
[0086] 发送器/接收器21向终端管理系统7和网络服务器8传送各种数据、各种请求、各种指令等，并从终端管理系统7和网络服务器8接收各种数据、各种请求、各种指令等。例如，发送器/接收器21在网络服务器8处从内容站点获取网络内容数据。发送器/接收器21输出获取自终端管理系统7的多种数据至分发控制系统2内的功能组件，并基于获取自终端管理系统7的各种数据、各种请求、各种指令等来控制分发控制系统2内的功能组件。例如，对于浏览器20，发送器/接收器21输出请求用于将分发模式从终端管理系统7切换至浏览器管理单元22。然后浏览器管理单元22控制在浏览器中从一个浏览器至另一浏览器的切换。基于用于从终端管理系统7切换分发的请求，发送器/接收器21执行图15和图16中所示的编码器桥单元30中组件组合的切换。
[0087] 浏览器管理单元22管理浏览器20。例如，浏览器管理单元22指示浏览器20启动和退出，以及在启动或退出时将编码器ID编号。编码器ID为浏览器管理单元22进行编号的识别信息，以便于管理编码器桥单元30的进程。
[0088] 浏览器管理单元22在每次浏览器20启动时对浏览器ID进行编号并管理。浏览器ID为浏览器管理单元22进行编号的识别信息，以便于管理浏览器20的进程以标识浏览器20。
[0089] 浏览器管理单元22通过发送器/接收器31从通信终端5获取各种操作数据并将其输出至浏览器20。该操作数据为在通信终端5上通过操作事件(通过键盘211、鼠标212等的操作，使用电子笔P的笔画等)生成的数据。当通信终端5提供如温度传感器、湿度传感器和加速度传感器之类的各种传感器时，浏览器管理单元22获取包含来自通信终端5的传感器的输出信号的传感器信息并将其输出至浏览器20。浏览器管理单元22进一步从识别单元35获取图像(声音)数据并输出至浏览器20，并从识别单元35获取以下描述的识别信息并将其存储在存储单元2000。浏览器管理单元22从接收FIFO缓冲器34获取视频(声音)数据并输出至浏览器20。
[0090] 传送FIFO24为缓冲器，其在其中存储了由浏览器20生成的作为静态图像(声音)数据的帧数据片段。
[0091] 时间管理单元25管理专用于分发控制系统2的时间T。
[0092] 时间获取单元26结合以下描述的通信终端5中的时间控制器56执行以下描述的时间调整处理。具体地，时间获取单元26从时间管理单元25获取表示分发控制系统2中的时间T的时间信息(T)，通过发送器/接收器31以及发送器/接收器51从以下描述的时间控制器56接收表示在通信终端5中的时间t的时间信息(t)，并传送时间信息(t)和时间信息(T)至时间控制器56。
[0093] 通道适配控制器27基于传送延迟时间信息(D)计算再现延迟时间U并计算如编码器桥单元30中转换器10的帧率和数据分辨率之类的操作状况。该再现延迟时间为用于通过数据的缓冲延迟再现直到正在被再现时的时间。换言之，通道适配控制器27基于传送延迟时间信息(D)和数据大小(例如，位数量或字节数量)改变编码器桥单元30的操作。该传送延迟时间信息(D)基于由通信终端5的延迟信息获取单元57获取的多个传送延迟时间D1的片段表示频率分发信息。传送延迟时间D1表示从视频(声音)数据从分发控制系统2传送的点到被通信终端5接收的点的时间，并从再现控制器53获取。
[0094] 编码器桥单元30将由浏览器20生成的作为静态图像(声音)数据的帧数据片段输出至以下描述的编码器桥单元30中的转换器10。在这种情况下，编码器桥单元30还基于由通道适配控制器27计算的操作状况来操作。编码器桥单元30将参考图15和图16进行更详细的描述。图15为编码器桥单元的详细示图。图16为说明了转换器的功能的功能框图。
[0095] 如图15所示，编码器桥单元30包括创建/选择单元310、选择单元320，和在其之间提供的多个转换器(10a，10b，10c)。尽管这里说明了三个转换器，但任意数量的转换器可被提供。下文中，任意转换器都被称为“转换器10”。
[0096] 转换器10将由浏览器20生成的作为静态图像(声音)数据的帧数据片段的数据格式转换为H.264等的数据格式，允许数据通过通信网络9分发至通信终端5。为此，如图16所示，转换器10包括裁剪单元11、尺寸调整单元12、划分单元13和编码单元19。裁剪单元11、尺寸调整单元12和划分单元13不对声音数据执行任何处理。
[0097] 裁剪单元11执行裁出静态图像的部分的处理。尺寸调整单元12改变静态图像的尺寸。划分单元13划分静态图像，如图5所示。
[0098] 例如，裁剪单元11裁出的静态图像的区域(此后称为裁出区域)可由用户使用通信终端5指定。图17为根据本实施例的说明裁出区域指定操作的示图。图17举例说明了使用具有触摸板的智能设备作为通信终端5的情况。
[0099] 如图17所示，裁出区域R110的指定由用户使用通信终端5的触摸板来输入区域而执行。输入的该区域可例如通过在触摸板上的捏紧操作(扩展或紧缩与触摸板接触的两个指尖点之间的距离的操作)来实现。作为捏紧操作的结果给出的两个点的坐标(Xr，Yr)和(X1，Y1)从通信终端5传送至分发控制系统2。分发控制系统2输入所接收的两个点的坐标信息至转换器10的裁剪单元11，作为裁出区域信息。基于所输入的裁出区域信息，裁剪单元11提取对应于获取自浏览器20的静态图像数据中的裁出区域R110的图像数据。提取的图像数据通过尺寸调整单元12和划分单元13根据需要来传递并由编码单元19编码以输出。例如，提取的图像数据由尺寸调整单元12调整为与裁出之前的图像数据相同的尺寸，然后由编码单元19编码以输出。
[0100] 编码单元19对由浏览器20生成的作为静态图像(声音)数据的帧数据片段进行编码，由此进行转换以通过通信网络9分发视频(声音)数据至通信终端5。当视频未在运动中(当没有帧间变化时)时，跳跃帧被插入在其后直到视频移动以节约带宽。
[0101] 当声音数据连同静态图像数据一起通过渲染而生成时，两个数据片段被编码，而当只有声音数据被生成时，编码仅被执行以压缩数据而不裁剪、调整尺寸和划分。
[0102] 创建/选择单元310创建新的转换器10或选择作为静态图像(声音)数据的帧数据片段以输入至已经生成的转换器10。在创建中，创建/选择单元310根据通信终端5的性能创建能够转换的转换器10，以再现视频(声音)数据。在选择中，选择已经生成的转换器10。例如，在开始除了至通信终端5a的分发之外的至通信终端5b的分发时，与分发至通信终端5a的视频(声音)数据相同的视频(声音)数据可分发至通信终端5b。此外，在这种情况下，当通信终端5b具有与通信终端5a的性能相同级别的性能以再现视频(声音)数据时，创建/选择单元310使用已经为通信终端5a创建的转换器10a，而不对通信终端5b创建新的转换器10b。
[0103] 选择单元320从已经生成的转换器10中选择所需的一个。创建/选择单元310和选择单元320的选择允许以各种模式的分发，如图6所示。
[0104] 发送器/接收器31向通信终端5传送各种数据、请求等并且从通信终端5接收各种数据、请求等。该发送器/接收器31通过通信网络9从云中将各种数据、请求等传送至通信终端5，由此允许分发控制系统2将各种数据、请求等分发至通信终端5。例如，在通信终端5的登录处理中，发送器/接收器31将用于提示用户登录请求的认证屏幕数据传送至通信终端5的发送器/接收器51。发送器/接收器31还在安全套接字层(HTTPS)服务器上通过超文本传送协议由专用于分发系统1的协议，执行向通信终端5的用户应用和通信终端5的装置应用的数据传送和从通信终端5的用户应用和通信终端5的装置应用的数据接收。该专用协议为基于HTTPS的应用层协议，用于实时传送并接收数据，而不在分发控制系统2和通信终端之间被中断。发送器/接收器31还执行传送响应控制、实时数据创建、命令传送、接收响应控制、接收数据分析以及手势转换。
[0105] 该传送响应控制为管理从通信终端5请求的用于下载的HTTPS会话的处理，以便于从分发控制系统2传送数据至通信终端5。用于下载的HTTPS会话的响应不会立即结束，而是保持特定时间段(一到数分钟)。发送器/接收器31动态地在响应的主体部分中写入要发送至通信终端5的数据。为消除重新连接的开销，另一请求被允许在先前会话结束之前从通信终端到达。通过使发送器/接收器31就绪直到先前请求完成，开销可被消除，即使当重新连接被执行。
[0106] 实时数据创建为向由图16中的编码单元19生成的压缩视频(以及压缩声音)的数据给予专用头部并将其写入HTTPS主体部分的处理。
[0107] 命令传送为生成要传送至通信终端5的命令数据并将其写入引导至通信终端5的HTTPS主体部分的处理。
[0108] 接收响应控制为管理从通信终端5请求的HTTPS会话以使得分发控制系统2从通信终端5接收数据的处理。该HTTPS会话的响应不会立即结束而是保持特定时间段(一到数分钟)。通信终端5动态地将要发送到分发控制系统2的发送器/接收器31的数据写入到请求的主体部分中。
[0109] 接收数据分析为通过类型来分析传送自通信终端5的数据并传递该数据至必要进程的处理。
[0110] 手势转换为将用户使用电子笔或手写输入至作为电子黑板的通信终端5f的手势事件转换为以浏览器20可接收的格式的数据的处理。
[0111] 接收FIFO34为在其中存储由解码单元40解码的视频(声音)数据的缓冲器。
[0112] 识别单元35对接收自通信终端5的图像(声音)数据执行处理。具体地，例如，识别单元35基于照相机62采集的图像来识别人或动物的面部、年龄、性别等用于标示。在工作场所，识别单元35基于照相机62采集的图像通过面部识别和替换背景图像的处理来执行姓名标记。识别单元35在存储单元2000中存储表示的识别细节的识别信息。识别单元35通过使用识别扩展卡执行处理实现加速。
[0113] 延迟信息获取单元37a用于上行通道适配控制的处理，并对应于用于下行通道适配控制的处理的、通信终端5的延迟信息获取单元57。具体地，延迟信息获取单元37a从解码单元40获取表示传送延迟时间d1的传送延迟时间信息(d1)并保持特定时间段，并当多个传送延迟时间信息(d1)片段被获取时，基于多个传送延迟时间d1片段将表示频率分发信息的传送延迟时间信息(d)输出至通道适配控制器37b。传送延迟时间信息(d1)表示传送延迟时间，表示从视频(声音)数据传送自通信终端5的点到其被分发控制系统2接收的点的时间。
[0114] 通道适配控制器37b用于上行通道适配控制的处理，并对应于用于下行通道适配控制的处理的、通道适配控制器27。具体地，通道适配控制器37b基于传送延迟时间信息(d)计算通信终端5的编码单元60的操作状况。通道适配控制器37b将表示操作状况如帧率和数据分辨率之类的通道适配控制信号通过发送器/接收器31和发送器/接收器51传送至通信终端5的编码单元60。
[0115] 解码单元40解码传送自通信终端5的视频(声音)数据。解码单元40还输出表示传送延迟时间d1的传送延迟时间信息(d1)至延迟信息获取单元37a。
[0116] 通信终端的功能配置
[0117] 通信终端5的功能配置参考图10来描述。图10为主要说明通信终端的功能的功能框图。通信终端5是作为用户执行到分发系统1的登录、开始和停止视频(声音)数据分发等的接口的终端。
[0118] 如图10所示，通信终端5具有由包括图7中所示的CPU201和程序的硬件配置实现的图10中的功能组件。当通信终端5通过插入如图2所示的加密狗99而与其他终端和系统经通信网络9可通信时，通信终端5具有由图7和图8中所示的程序和硬件配置实现的图10中的功能组件。
[0119] 具体地，通信终端5包括解码单元50、发送器/接收器51、操作单元52、再现控制器53、渲染单元55、时间控制器56、延迟信息获取单元57、显示单元58和编码单元60。通信终端
5进一步包括由图7中所示的RAM203实现的存储单元5000。该存储单元5000在其中存储表示以下描述的时间差Δ的时间差信息(Δ)和表示在通信终端5中的时间t的时间信息(t)。
5进一步包括由图7中所示的RAM203实现的存储单元5000。该存储单元5000在其中存储表示以下描述的时间差Δ的时间差信息(Δ)和表示在通信终端5中的时间t的时间信息(t)。
[0120] 解码单元50解码分发自分发控制系统2并输出自再现控制器53的视频(声音)数据。
[0121] 发送器/接收器51向分发控制系统2的发送器/接收器31以及终端管理系统7的发送器/接收器71a传送各种数据、请求等并从分发控制系统2的发送器/接收器31以及终端管理系统7的发送器/接收器71a接收各种数据、请求等。例如，在通信终端5的登录处理中，响应于操作单元52启动通信终端5，发送器/接收器51执行终端管理系统7的发送器/接收器71的登录请求。
[0123] 再现控制器53缓冲接收自发送器/接收器51的视频(声音)数据(实时数据的包)并以所考虑的再现延迟时间U输出至解码单元50。再现控制器53还计算表示传送延迟时间D1的传送延迟时间信息(D1)，并输出传送延迟时间信息(D1)至延迟信息获取单元57。传送延迟时间信息(D1)表示从视频(声音)数据传送自分发控制系统2的点到其被通信终端5接收的点的时间。
[0124] 渲染单元55渲染由解码单元50解码的数据。
[0125] 时间控制器56结合分发控制系统2的时间获取单元26执行时间调整处理。具体地，时间控制器56从存储单元5000获取表示通信终端5中的时间t的时间信息(t)。时间控制器56通过发送器/接收器51和发送器/接收器31发出对于表示分发控制系统2中的时间T的时间信息(T)的请求至分发控制系统2的时间获取单元26。在这种情况下，时间信息(t)与对于时间信息(T)的请求同时被传送。
[0126] 延迟信息获取单元57从再现控制器53获取表示传送延迟时间D1的传送延迟时间信息(D1)并保持特定时间段，并当多个传送延迟时间信息(D1)段被获取时，基于多个传送延迟时间D1段，通过发送器/接收器51和发送器/接收器31将表示频率分发信息的传送延迟时间信息(D)输出至通道适配控制器27。例如，每次一百帧地传送传送延迟时间信息(D)。
[0127] 显示单元58再现由渲染单元55渲染的数据。
[0128] 编码单元60将以下信息：从内设麦克风213或外部连接的照相机62以及麦克风63获取并被编码的视频(声音)数据[E]；表示通信终端5的当前时间t0并获取自存储单元5000的时间信息(t0)；以及表示在分发控制系统2与通信终端5之间的时间差Δ并从存储单元5000获取的时间差信息(Δ)，通过发送器/接收器51和发送器/接收器31传送至分发控制系统2的解码单元40。编码单元60基于从通道适配控制器37b接收的由通道适配控制信号表示的操作状况，改变编码单元60的操作状况。编码单元60依据新的操作状况，将以下信息：从照相机62和麦克风63获取并被编码的视频(声音)数据[E]；表示通信终端5的当前时间t0并从存储单元5000获取的时间信息(t0)；以及表示时间差Δ并从存储单元5000获取的时间差信息(Δ)，通过发送器/接收器51和发送器/接收器31传送至分发控制系统2的解码单元40。
[0129] 内设麦克风213、外部连接的照相机62和麦克风63等是输入单元的示例，并且是需要编码和解码的设备。除视频(声音)数据外，输入单元可输出触摸数据和气味数据。
[0130] 输入单元包括各种传感器，如温度传感器、方向传感器、加速度传感器等。
[0131] 终端管理系统的功能配置
[0132] 终端管理系统7的功能配置参考图11来描述。图11为说明终端管理系统的功能的功能框图。
[0133] 如图11所示，终端管理系统7具有由包括图7中所示的CPU201的硬件配置和程序实现的图11中的功能组件。
[0134] 具体地，终端管理系统7包括发送器/接收器71a、发送器/接收器71b以及认证单元75。终端管理系统7进一步包括由图7中所示的HDD204实现的存储单元7000。存储单元7000在其中存储分发目的地选择菜单数据、终端管理表7010以及可用的终端管理表7020。
[0135] 分发目的地选择菜单为表示如图12所示的目标选择菜单屏幕的数据。
[0136] 如图13所示，终端管理表7010管理通信终端5的终端ID、用户证书、当用户使用分发系统1的服务时的合约信息、通信终端5的终端类型、表示相应通信终端5的主页统一资源定位器(URL)的设置信息、通信终端5的执行环境信息、共享ID、安装位置信息以及相互关联的显示名称信息。执行环境信息包括每一个通信终端5的“喜好”、“先前Cookie信息”以及“缓存文件”，其在通信终端5的登录之后连同设置信息发送至分发控制系统2，并用于在通信终端5上执行各自的服务。
[0137] 共享ID为在每一个用户分发与分发至他/她自己的通信终端5的视频(声音)数据相同的视频(声音)数据至其他通信终端5时使用的、由此执行远程共享处理的ID，并且共享ID是识别其他通信终端和其他通信终端组的识别信息。例如，终端ID“t006”的共享ID为“v006”，终端ID“t007”的共享ID为“v006”，并且终端ID“t008”的共享ID为“v006”。当具有终端ID“t001”的通信终端5a发出请求用于与具有终端ID“v006”的通信终端(5f1，5f2，5f3)进行远程共享处理的请求时，分发控制系统2分发与分发至通信终端5a的视频(声音)数据相同的视频(声音)数据至通信终端(5f1，5f2，5f3)。然而，当通信终端5a和通信终端(5f1，5f2，5f3)在显示单元58的分辨率上不同时，分发控制系统2因此分发视频(声音)数据。
[0138] 如图5所示，例如，安装位置信息表示当通信终端(5f1，5f2，5f3)并排布置时的安装位置。显示名称信息为表示图12中所示的分发目的地选择菜单中显示名称的细节的信息。
[0139] 可用终端管理表7020与每一个终端ID关联地管理表示通信终端或通信终端组的共享ID，由此，终端ID表示的通信终端5可执行远程共享处理。
[0140] 功能组件参考图11来描述。
[0141] 发送器/接收器71a向通信终端5传送各种数据、请求等并从通信终端5接收各种数据、请求等。例如，发送器/接收器71a接收来自通信终端5的发送器/接收器51的登录请求并传送登录请求的认证结果至发送器/接收器51。
[0142] 发送器/接收器71b向分发控制系统2传送各种数据、请求等并从分发控制系统2接收各种数据、请求等。例如，发送器/接收器71b从分发控制系统2的发送器/接收器21接收用于分发目的地选择菜单的数据的请求，并传送分发目的地选择菜单的数据至发送器/接收器21。
[0143] 认证单元75基于接收自通信终端5的终端ID和用户证书搜索终端管理表7010，由此确定是否存在终端ID以及用户证书的相同组合，由此认证通信终端5。
[0144] 实施例的操作和处理
[0145] 本实施例操作和处理片段参考图18至图25来描述。这些处理片段由分发控制系统2、通信终端5、终端管理系统7和网络服务器8的CPU根据其中存储的程序来执行。
[0146] 基本分发处理
[0147] 图3中所示的基本分发方法中的具体分发处理参考图18来描述。图18为说明分发控制系统的基本分发处理的顺序图。尽管本文描述的是通过通信终端5a发出登录请求的情况，但登录可通过除通信终端5a之外的通信终端5执行。
[0148] 如所示图18，当用户打开通信终端5a时，通信终端5a的发送器/接收器51发出登录请求至终端管理系统7的发送器/接收器71a(步骤S21)。发送器/接收器71a接收登录请求。该登录请求包括通信终端5a的终端ID和用户证书。认证单元75然后获取通信终端5a的终端ID和用户证书。
[0149] 认证单元75基于终端ID和用户证书搜索终端管理表7010，由此确定是否存在终端ID和用户证书的相同组合，由此认证通信终端5a(步骤S22)。以下描述了终端ID以及用户证书的相同组合被呈现在终端管理表7010中的情况，即通信终端5a被确定为分发系统1中的有效终端。
[0150] 终端管理系统7的发送器/接收器71a传送分发控制系统2的IP地址至通信终端5a的发送器/接收器51(步骤S23)。分发控制系统2的IP地址通过终端管理系统7从分发控制系统2获取并提前存储于存储单元7000。
[0151] 终端管理系统7的发送器/接收器71b发出浏览器20的启动请求至分发控制系统2的发送器/接收器21(步骤S24)。发送器/接收器21接收浏览器20的启动请求。浏览器管理单元22基于由发送器/接收器21接收的启动请求来启动浏览器20(步骤S25)。
[0152] 编码器桥单元30的创建/选择单元310根据通信终端5a的性能创建转换器10，以再现视频(声音)数据(显示器的分辨率等)和内容的类型(步骤S26)。接下来，发送器/接收器21根据浏览器20的指令发出用于内容数据[A]的请求至网络服务器8(步骤S27)。响应于此，网络服务器8从其自身的存储单元(未示出)读取所请求的内容数据[A](步骤S28)。然后，网络服务器8传送该内容数据[A]至分发控制系统2的发送器/接收器21(步骤S29)。
[0153] 浏览器20渲染由发送器/接收器21接收的内容数据[A]，由此生成帧数据片段作为静态图像(声音)数据并将其输出至传送FIFO24(步骤S30)。转换器10编码存储于传送FIFO24中的该帧数据片段，由此将其转换为要分发至通信终端5a的视频(声音)数据[A](步骤S31)。
[0154] 发送器/接收器31传送视频(声音)数据[A]至通信终端5a的发送器/接收器51(步骤S32)。通信终端5a的发送器/接收器51接收视频(声音)数据[A]并将其输出至再现控制器53。
[0155] 在通信终端5a，解码单元50从再现控制器53获取视频(声音)数据[A]并将其解码(步骤S33)。其后，扬声器61基于所解码的声音数据[A]再现声音，而且显示单元58基于从解码单元50获取并由渲染单元55渲染的视频数据[A]再现视频(步骤S34)。
[0156] 使用多个通信终端的组合式分发的处理
[0157] 以下参考图19描述了通过分发控制系统使用多个通信终端的通信处理。图19为说明了通过分发控制系统使用多个通信终端的分发处理的顺序图。这里描述的是图6中所示的模式的用于通信终端5的具体处理。因为这里的处理包括类似于步骤S21至S29的登录处理、浏览器启动等，所以描述以对应于步骤S29的处理开始。
[0158] 如图19所示，分发控制系统2的发送器/接收器21从网络服务器8接收内容数据[A](步骤S41)。浏览器20渲染内容数据[A]，由此生成帧数据片段作为静态图像(声音)数据并将其输出至传送FIFO24(步骤S42)。
[0159] 当通信终端5f1的编码单元60从照相机62和麦克风63接收内容数据的输入作为视频(声音)数据[E]时(步骤S43)，编码单元60编码内容数据[E](步骤S44)。发送器/接收器51传送由编码单元60编码的内容数据[E]至分发控制系统2的发送器/接收器31(步骤S45)。分发控制系统2的发送器/接收器31接收内容数据[E]。
[0160] 分发控制系统2的解码单元40解码由发送器/接收器31接收的内容数据[E]，并将其输出至接收FIFO34(步骤S46)。浏览器20渲染存储于接收FIFO34的内容数据[E]，由此生成帧数据[E]作为静态图像(声音)数据并将其输出至传送FIFO24(步骤S47)。在这种情况下，浏览器20以其中内容数据[E]与已经获取的内容数据[A]组合的布局来输出数据。
[0161] 此外，当通信终端5f1的操作单元52接收使用电子笔P1的笔画操作的输入时(步骤S48)，发送器/接收器51传送表示由操作单元52接收的笔画操作的细节的操作数据[p]至分发控制系统2的发送器/接收器31(步骤S49)。分发控制系统2的发送器/接收器31接收该操作数据[p]。浏览器管理单元22将发送器/接收器31接收的操作数据[p]输出至浏览器20。
[0162] 浏览器20渲染操作数据[p]，由此生成帧数据[p]作为静态图像(声音)数据并将其输出至传送FIFO24(步骤S50)。在这种情况下，浏览器20以其中操作数据[p]与已经获取的内容数据([A]，[E])组合的布局来输出数据。
[0163] 转换器10编码帧数据片段([A]，[E]，[p])作为存储于传送FIFO24的静态图像(声音)数据，由此将其转换为要分发至通信终端5f1的视频(声音)数据([A]，[E]，[p])(步骤S51)。
[0164] 发送器/接收器31从包括转换器10的编码器桥单元30获取编码的视频(声音)数据([A]，[E]，[p])并将其传送至通信终端5f1的发送器/接收器51(步骤S52-1)。通信终端5f1的发送器/接收器51接收视频(声音)数据([A]，[E]，[p])，并且通信终端5f1的再现控制器53从发送器/接收器51获取视频(声音)数据([A]，[E]，[p])。在通信终端5f1，解码单元50从再现控制器53获取视频(声音)数据([A]，[E]，[p])，并将其解码(步骤S53-1)。其后，扬声器
61基于所解码的声音数据([A]，[E])再现声音，并且显示单元58基于从解码单元50获取并由渲染单元55渲染的的视频数据([A]，[E]，[p])再现视频(步骤S54-1)。
61基于所解码的声音数据([A]，[E])再现声音，并且显示单元58基于从解码单元50获取并由渲染单元55渲染的的视频数据([A]，[E]，[p])再现视频(步骤S54-1)。
[0165] 对于通信终端5f2，如步骤S52-1的情况，发送器/接收器31从编码器桥单元30获取编码的视频(声音)数据([A]，[E]，[p])并将其传送至通信终端5f2的发送器/接收器51(步骤S52-2)。通信终端5f2的再现控制器53获取视频(声音)数据([A]，[E]，[p])。在通信终端5f1，解码单元50从再现控制器53获取视频(声音)数据([A]，[E]，[p])并将其解码(步骤S53-2)。其后，扬声器61基于所解码的声音数据([A]，[E])再现声音，并且显示单元58基于从解码单元50获取并由渲染单元55渲染的视频数据([A]，[E]，[P])再现视频(步骤S54-2)。
[0166] 因此，与输出至通信终端5f1的视频(声音)相同的视频(声音)也输出至通信终端5f2。
[0167] 时间调整的处理
[0168] 时间调整的处理参考图20来描述。图20为说明时间调整的处理的顺序图。
[0169] 为了获取表示当发送器/接收器51发出用于时间信息(T)的请求至分发控制系统2的时间，通信终端5的时间控制器56从存储单元5000获取通信终端5中的时间信息(ts)(步骤S81)。发送器/接收器51发出用于时间信息(T)的请求至发送器/接收器31(步骤S82)。在这种情况下，时间信息(ts)与用于时间信息(T)的请求同时被传送。
[0170] 为了获取在步骤S82表示发送器/接收器31接收请求的时间，分发控制系统2的时间获取单元26从时间管理单元25获取分发控制系统2中的时间信息(Tr)(步骤S83)。为了获取在步骤S82表示发送器/接收器31响应该请求的时间，时间获取单元26进一步从时间管理单元25获取分发控制系统2中的时间信息(Ts)(步骤S84)。然后发送器/接收器31传送时间信息(ts，Tr，Ts)至发送器/接收器51。
[0171] 为了获取表示发送器/接收器51在步骤S85接收响应的时间，通信终端5的时间控制器56从存储单元5000获取通信终端5中的时间信息(tr)(步骤S86)。
[0172] 通信终端5的时间控制器56计算在分发控制系统2和通信终端5之间的时间差Δ(步骤S87)。该时间差Δ由以下公式(1)给出。
[0173] Δ＝((Tr+Ts)/2)-((tr+ts)/2) (1)
[0174] 时间控制器56在存储单元5000中存储表示时间差Δ的时间差信息(Δ)(步骤S88)。例如，每分钟定期执行一系列时间调整的处理。
[0175] 下行通道适配控制的处理
[0176] 接下来参考图21描述的是针对从分发控制系统2传送至通信终端5(下行)的数据的通道适配控制的处理。图21为说明针对分发控制系统传送至通信终端的数据的通道适配控制的处理的顺序图。
[0177] 首先，分发控制系统2的通道适配控制器27计算再现延迟时间信息(U)(表示用于通过缓冲延迟再现直到通信终端5的再现控制器53再现视频(声音)数据的再现延迟时间U)，并输出再现延迟时间信息(U)至编码器桥单元30(步骤S101)。
[0178] 然后，发送器/接收器31从编码器桥单元30获取再现延迟时间信息(U)并将其传送至通信终端5的发送器/接收器51(步骤S102)。通信终端5的发送器/接收器51接收再现延迟时间信息(U)。例如，编码器桥单元30将从时间管理单元25获取的表示时间T0的时间信息(T0)作为时间戳增加至从传送FIFO24获取并编码的视频(声音)数据[A](步骤S103)。发送器/接收器31传送分发控制系统2的视频(声音)数据和时间信息(T0)至通信终端5的发送器/接收器51(步骤S104)。通信终端5的发送器/接收器51接收分发控制系统2的时间信息(T0)并输出视频(声音)数据和时间信息(T0)至再现控制器53。
[0179] 在通信终端5中，基于在步骤S102获取的再现延迟时间信息(U)、在步骤S104获取的时间信息(T0)以及在步骤S88存储于存储单元5000的时间差信息(Δ)，再现控制器53等待直到通信终端5的时间(T0+U-Δ)然后输出在步骤S104获取的视频(声音)数据至解码单元50。这使得扬声器61输出声音且使得显示单元58通过渲染单元55再现视频(步骤S105)。这使得仅在如下公式(2)给出的再现延迟时间U范围内由通信终端5接收的视频(声音)数据被再现，而该范围以外的视频(声音)数据被过度延迟并被删除而不被再现。
[0180] U≥(t0+Δ)-T0 (2)
[0181] 再现控制器53从存储单元5000读取通信终端5的当前时间t0(步骤S106)。该时间t0表示当通信终端5从分发控制系统2接收视频(声音)数据时通信终端5中的时间。再现控制器53进一步读取表示在步骤S86存储于存储单元5000的时间差Δ的时间差信息(Δ)(步骤S107)。然后，再现控制器53计算表示从视频(声音)数据从分发控制系统2传送的点到其由通信终端5接收的点的时间的传送延迟时间D1(步骤S108)。该计算使用如下公式(3)执行；当通信网络9变得拥塞时，传送延迟时间D1变长。
[0182] D1＝(t0+Δ)-T0 (3)
[0183] 延迟信息获取单元57从再现控制器53获取表示传送延迟时间D1的传送延迟时间信息(D1)，并保持特定时间段，并当多个传送延迟时间信息(D1)片段被获取时，将基于多个传送延迟时间D1片段表示频率分发信息的传送延迟时间信息(D)输出至发送器/接收器51(步骤S109)。发送器/接收器51将传送延迟时间信息(D)传送至分发控制系统2的发送器/接收器31(步骤S110)。分发控制系统2的发送器/接收器31接收传送延迟时间信息(D)并输出传送延迟时间信息(D)至通道适配控制器27.
[0184] 分发控制系统2的通道适配控制器27基于传送延迟时间信息(D)重新计算再现延迟信息U’并计算如转换器10的帧率和数据分辨率之类的操作状况，并将其输出至编码器桥单元30(步骤S111)。换言之，通道适配控制器27基于传送延迟时间信息(D)和数据大小(例如，位数或字节数)改变编码器桥单元30的操作。
[0185] 发送器/接收器31从编码器桥单元30获取表示在步骤S111计算的新的再现延迟时间U’的再现延迟时间信息(U’)，并传送再现延迟时间信息(U’)至通信终端5的发送器/接收器51(步骤S112)。通信终端5的发送器/接收器51接收再现延迟时间信息(U’)。
[0186] 编码器桥单元30的转换器10基于表示操作状况的通道适配控制信号改变转换器10的操作状况(步骤S113)。例如，当传送延迟时间D1过长且再现延迟时间U根据传送延迟时间D1设置为更长时，在扬声器61和显示单元58处的再现时间被过度延迟。因此，存在使再现延迟时间U更长的限制。有鉴于此，通道适配控制器27不仅使编码器桥单元30将再现延迟时间U改变为再现延迟时间U’，而且使转换器10降低视频(声音)数据的帧率并降低视频(声音)数据的分辨率，由此解决通信网络9的拥塞。这使得编码器桥单元30，如在步骤S103那样，根据改变的操作状况将当前时间信息(T0)增加至视频(声音)数据[A]作为时间戳(步骤S104)。视频(声音)数据因此被增加(步骤S114)。发送器/接收器31传送分发控制系统2的视频(声音)数据和时间信息(T0)至通信终端5的发送器/接收器51(步骤S115)。通信终端5的发送器/接收器51接收分发控制系统2的视频(声音)数据和时间信息(T0)并输出视频(声音)数据和时间信息(T0)至再现控制器53。
[0187] 在通信终端5，基于在步骤S112获取的再现延迟时间信息(U’)、在步骤S115获取的时间信息(T0)以及在步骤S88存储于存储单元5000的时间差信息(Δ)，再现控制器53等待直到通信终端5的时间(T0+U’-Δ)，然后输出视频(声音)数据至解码单元50，由此，如步骤S105那样，使得扬声器61输出声音且使得显示单元58通过渲染单元55再现视频(步骤S116)。在其之后是步骤S106中或之后的处理。由此，连续执行下行通道适配控制的处理。
[0188] 上行通道适配控制的处理
[0189] 接下来参考图22描述的是针对从通信终端5传送至分发控制系统2的数据的通道适配控制的处理(上行)。图21为说明了针对从通信终端传送至分发控制系统的数据的通道适配控制的处理的顺序图。
[0190] 首先，通信终端5的编码单元60编码从照相机62和麦克风63输入的作为视频(声音)数据[E]的内容数据(步骤S121)。此时，编码单元60从存储单元5000获取表示通信终端5中的当前时间t0的时间信息(t0)和表示时间差Δ的时间差信息(Δ)并且不进行编码。发送器/接收器51传送视频(声音)数据[E]、时间信息(t0)和时间差信息(Δ)至分发控制系统2的发送器/接收器31(步骤S122)。分发控制系统2的发送器/接收器31接收视频(声音)数据[E]、时间信息(t0)和时间差信息(Δ)。
[0191] 在分发控制系统2中，解码单元40从时间管理单元25读取表示视频(声音)数据[E]等在步骤S112何时接收的时间T0(步骤S123)。然后解码单元40计算表示从视频(声音)数据从通信终端5传送的点到其由分发控制系统2接收的点的时间的传送延迟时间d1(步骤S124)。该计算由如下公式(4)执行；当通信网络9变得拥塞时，传送延迟时间d1变得更长。
[0192] d1＝T0-(t0+Δ) (4)
[0193] 如同延迟信息获取单元57的情况，分发控制系统2的延迟信息获取单元37a从解码单元40获取表示传送延迟时间d1的传送延迟时间信息(d1)，并将其保持特定时间段，而当多个传送延迟时间信息(d1)片段被获取时，将基于多个传送延迟时间d1片段表示频率分发信息的传送延迟时间信息(d)输出至通道适配控制器37b(步骤S125)。
[0194] 基于传送延迟时间信息(d)，通道适配控制器37b计算编码单元60的操作状况(步骤S126)。发送器/接收器31将表示如帧率和数据分辨率之类的操作状况的通道适配控制信号传送至通信终端5的发送器/接收器51(步骤S127)。通信终端5的发送器/接收器51接收通道适配控制信号。换言之，在图21中所示的(下行)通道适配控制的情况下，通道适配控制信号输出至同一分发控制系统2内的编码器桥单元30，而相反，在图22中所示的通道适配控制的情况下(上行)，通道适配控制信号通过通信网络9从分发控制系统2传送至通信终端5。
[0195] 基于由发送器/接收器51接收的操作状况，编码单元60改变编码单元60的操作状况(步骤S128)。然后编码单元60基于新的操作状况执行与步骤S121相同的处理(步骤S129)。发送器/接收器51，如在步骤S122那样，将从照相机62和麦克风63获取并编码的视频(声音)数据[E]、从存储单元5000获取的表示通信终端5中的当前时间t0的时间信息(t0)以及同样从存储单元5000获取的表示时间差Δ的时间差信息(Δ)传送至分发控制系统2的发送器/接收器31(步骤S130)。分发控制系统2的发送器/接收器31接收视频(声音)数据[E]、时间信息(t0)以及时间差信息(Δ)。在其之后是步骤S123中或之后的处理。因此，连续执行上行通道适配控制的处理。
[0196] 多重显示的处理
[0197] 接下来参考图23至图25描述多重显示的处理。图23至图25为说明图5中所示的多重显示的处理的顺序图。
[0198] 以下描述了以划分的方式将在通信终端5a上再现的再现视频(声音)[XYZ]也同样再现于通信终端(5f1，5f2，5f3)上的示例。
[0199] 用于显示网络内容的浏览器20称为“浏览器20a”，而用于对用户显示设置屏幕的浏览器20称为“浏览器20b”。首先描述的是对应于图18的步骤S30的处理。
[0200] 首先，分发控制系统2的浏览器20a渲染从网络服务器8获取的网络内容数据[XYZ]，由此生成作为静态图像(声音)数据的帧数据片段并将其输出至传送FIFO24(步骤S201)。转换器10对存储于传送FIFO24中的该帧数据片段进行编码，由此将其转换为可分发至通信终端5a的数据格式的视频(声音)数据[XYZ](步骤S202)。
[0201] 发送器/接收器31将由转换器10转换的视频(声音)数据[XYZ]传送至通信终端5a的发送器/接收器51(步骤S203)。通信终端5a的发送器/接收器51接收视频(声音)数据[XYZ]并将其输出至再现控制器53。
[0202] 在通信终端5a中，解码单元50从再现控制器53获取视频(声音)数据[XYZ]并解码(步骤S204)。其后，扬声器61基于所解码的声音数据[XYZ]再现声音，且显示单元58基于从解码单元50获取并由渲染单元55渲染的视频数据[XYZ]再现视频(步骤S205)。
[0203] 显示于显示单元58上的屏幕由通信终端5a的用户切换至菜单请求屏幕(未示出)，且操作单元52接收在菜单请求屏幕上的“分发目的地选择菜单”(未示出)的按压(步骤S206)。这使得发送器/接收器51将用于切换至分发目的地选择菜单的请求传送至终端管理系统7的发送器/接收器71a(步骤S207)。终端管理系统7的发送器/接收器71a接收用于切换至分发目的地选择菜单的请求。该请求包括通信终端5a的终端ID。
[0204] 发送器/接收器71b传送浏览器20b的启动请求至分发控制系统2的发送器/接收器21(步骤S208)。分发控制系统2的发送器/接收器21接收浏览器20b的启动请求并将浏览器
20b的启动请求发布至浏览器管理单元22。
20b的启动请求发布至浏览器管理单元22。
[0205] 随后，浏览器管理单元22启动浏览器20b(步骤S209)。编码器桥单元30的创建/选择单元310将从浏览器20a到转换器10(例如转换器10a)的输出切换至从浏览器20b到转换器10(例如，转换器10b)的输出(步骤S210)，当通信终端5a和另一通信终端5(例如，通信终端5b)共享转换器10(例如，转换器10a)以在步骤S203接收视频(声音)数据时，编码器桥单元30的创建/选择单元310新创建转换器10(例如，转换器10b)，因为其他通信终端5(例如，通信终端5b)正在使用用于浏览器20a的转换器10(例如，转换器10a)。
[0206] 发送器/接收器21根据指令由浏览器20b将用于分发目的地选择菜单的请求传送至终端管理系统7的发送器/接收器71b(步骤S211)。在这种情况下，通信终端5a的终端ID也被传送。终端管理系统7的发送器/接收器71b接收用于分发目的地选择菜单的请求并将通信终端5a的终端ID输出至存储单元7000。
[0207] 响应于此，终端管理系统7的存储单元7000基于终端ID搜索可用终端管理表7020，由此提取对应的共享ID(步骤S212)。该共享ID表示可用于通信终端5a执行远程共享处理的通信终端5。如图14所示，因为通信终端5a的终端ID为“t001”，所以要提取的共享ID为“v003”和“v006”。
[0208] 存储单元7000基于提取的共享ID进一步搜索终端管理表7010，由此提取表示对应的显示名称的显示名称信息(步骤S213)。如图13所示，对应于提取的共享ID“v003”和“v006”的显示名称分别为“Tokyo head office10F MFP”和“Osaka exhibition hall1F multidisplay”。
[0209] 发送器/接收器71b传送作为内容数据的分发目的地选择菜单数据[M]至分发控制系统2的发送器/接收器21(步骤S214)。分发控制系统2的发送器/接收器21接收分发目的地选择菜单数据[M]并将其输出至浏览器20b。如图12所示，该分发目的地选择菜单数据[M]包括复选框、共享ID和显示名称。
[0210] 如图24所示，浏览器20b渲染表示从终端管理系统7获取的分发目的地选择菜单数据[M]的内容数据，由此生成静态图像(声音)数据的帧数据片段并输出至传送FIFO24(步骤S221)。转换器10对存储于传送FIFO24中的图像(声音)数据[M]的片段进行编码，由此以可分发至通信终端5a的数据格式将其转换为视频(声音)数据[M](步骤S222)。
[0211] 发送器/接收器31将由转换器10转换的视频(声音)数据[M]传送至通信终端5a的发送器/接收器51(步骤S223)。通信终端5a的发送器/接收器51接收视频(声音)数据[M]并将其输出至再现控制器53。
[0212] 在通信终端5a，解码单元50从再现控制器53获取视频(声音)数据[M]并将其解码(步骤S224)。其后，基于从解码单元50获取并由渲染单元55渲染的视频数据[XYZ]，显示单元58再现视频，如图12所示(步骤S225)。
[0213] 在图12中所示的分发目的地选择菜单中，当共享ID“v006”的复选框被选择并且“OK”按钮由用户按下时，操作单元52接收由用户输入的操作(步骤S226)。
[0214] 发送器/接收器51将作为操作数据的检查结果传送至分发控制系统2的发送器/接收器31(步骤S227)。分发控制系统2的发送器/接收器31接收作为操作数据的检查结果并将其输出至浏览器20b。
[0215] 浏览器20b从检查结果选择共享ID(步骤S228)。发送器/接收器21根据指令由浏览器20b将用于增加分发目的地的请求传送至终端管理系统7的发送器/接收器71b(步骤S229)。该用于增加分发目的地的请求包括在步骤S227选择的共享ID。终端管理系统7的发送器/接收器71b接收用于增加分发目的地的请求并将共享ID输出至存储单元7000。然后浏览器20b结束(步骤S230)。这使得编码器桥单元30的创建/选择单元310将从浏览器20b到转换器10的输出切换回从浏览器20a到转换器10的输出(步骤S231)。
[0216] 如图25所示，在终端管理系统7的存储单元7000中，基于在步骤S229发送的共享ID搜索终端管理表7010，由此提取对应的终端ID以及安装位置信息(步骤S241)。发送器/接收器71b传送增加分发目的地的指令至分发控制系统2的发送器/接收器21(步骤S242)。该增加分发目的地的指令包括在步骤S241提取的终端ID和安装位置信息。分发控制系统2的发送器/接收器21接收增加分发目的地的指令并输出该增加分发目的地的指令至浏览器管理单元22。此处包括的是三组终端ID和安装位置信息，即，分别为“t006”和“左边”的终端ID和安装位置信息、分别为“t007”和“中间”的终端ID和安装位置信息、以及分别为“t008”和“右边”的终端ID和安装位置信息。
[0217] 编码器桥单元30的创建/选择单元310创建用于多重显示的转换器10(步骤S243)。在这种情况下，编码器桥单元30的创建/选择单元310从浏览器管理单元22获取终端ID和安装位置信息。
[0218] 在步骤S243创建的转换器10的划分单元13划分存储于传送FIFO24的作为静态图像(声音)数据的帧数据[XYZ]片段，并且编码单元19编码划分的帧数据片段(步骤S244)。
[0219] 发送器/接收器31基于终端ID(“t006”)和安装位置信息(“左边”)将由编码器桥单元30编码的视频(声音)数据[X]传送至通信终端5f1的发送器/接收器51(步骤S245-1)。通信终端5f1的发送器/接收器51接收视频(声音)数据[X]并将其输出至再现控制器53。
[0220] 在通信终端5f1，解码单元50从再现控制器53获取视频(声音)数据[X]并将其解码(步骤S246-1)。其后，扬声器61基于所解码的声音数据[X]再现声音，并且显示单元58基于从解码单元50获取并由渲染单元55渲染的视频数据[X]再现视频(步骤S247-1)。
[0221] 类似地，发送器/接收器31基于终端ID(“t007”)和安装位置信息(“中间”)将由编码器桥单元30编码的视频(声音)数据[Y]传送至通信终端5f2的发送器/接收器51(步骤S245-2)。通信终端5f2的发送器/接收器51接收视频(声音)数据[Y]并将其输出至再现控制器53。
[0222] 在通信终端5f2，解码单元50从再现控制器53获取视频(声音)数据[Y]并将其解码(步骤S246-2)。其后，扬声器61基于所解码的声音数据[Y]再现声音，并且显示单元58基于从解码单元50获取并由渲染单元55渲染的视频数据[Y]再现视频(步骤S247-2)。
[0223] 类似地，发送器/接收器31基于终端ID(“t008”)和安装位置信息(“右边”)将由编码器桥单元30编码的视频(声音)数据[Z]传送至通信终端5f3的发送器/接收器51(步骤S235-3)。通信终端5f3的发送器/接收器51接收视频(声音)数据[Z]并将其输出至再现控制器53。
[0224] 在通信终端5f3，解码单元50从再现控制器53获取视频(声音)数据[Z]并解码(步骤S246-3)。其后，扬声器61基于所解码的声音数据[Z]再现声音，并且显示单元58基于从解码单元50获取并由渲染单元55渲染的视频数据[Z]再现视频(步骤S247-3)。
[0225] 如上关于具体示例描述的，在根据本实施例的分发系统1中，分发控制系统2包括执行渲染的浏览器20以及在云中执行编码等的编码器桥单元30。浏览器20基于以特定描述语言描述的内容数据而生成作为静态图像(声音)数据的帧数据片段。编码器桥单元30将该帧数据片段转换为通过通信网络9可分发的视频(声音)数据。其后，分发控制系统2分发视频(声音)数据至通信终端5。结果，通信终端5可平稳地再现网络内容，而无其浏览器的更新或用于升级CPU、OS、RAM等的规格的时间和开销。这消除了丰富化的内容增加了通信终端5上的负荷的问题。
[0226] 特别是，浏览器20允许实时通信，并且转换器10针对由浏览器20生成的帧数据执行实时编码。因此，不同于如在例如视频(声音)数据的按需分发中所见的DVD播放器选择并分发非实时(即预编码)视频(声音)数据的情况，分发控制系统2渲染紧接在分发之前获取的内容，由此生成帧数据片段并将其编码。这允许视频(声音)数据的实时分发。
[0227] 补充描述
[0228] 根据本实施例的分发系统1包括终端管理系统7和分发控制系统2作为独立的系统。例如，终端管理系统7和分发控制系统2可以例如通过使分发控制系统2而具有终端管理系统7的功能构造为完整的系统，。
[0229] 根据上述实施例的分发控制系统2和终端管理系统7可以由单个计算机实现或可以由多个计算机实现，其中各个部分(功能、部件或存储单元)被划分并分配至任意期望的单元中。
[0230] 上述实施例的程序被记录在其中的、如CD-ROM和HDD之类的存储介质可在本国或在国外作为程序产品提供。
[0231] 本发明的一个方面可提供分发控制系统、分发系统、分发控制方法以及计算机程序，其即使当使用瘦客户端技术时也可降低使用丰富化内容的通信终端的负荷。
| 标题 | 发布/更新时间 | 阅读量 |
|---|---|---|
| 一种测量仪器的仿真模拟方法 | 2020-05-08 | 601 |
| 智能家电装置控制方法 | 2020-05-08 | 69 |
| 防泄密笔记本电脑 | 2020-05-08 | 673 |
| 触摸板模组及电子终端 | 2020-05-08 | 301 |
| 操作检测装置 | 2020-05-11 | 463 |
| 一种WiFi游戏控制器与APP应用软件的连接方法 | 2020-05-11 | 534 |
| 用于由致动器驱动调节变倍器的放大级别的装置 | 2020-05-08 | 205 |
| 基于物联网平台的智能LED灯开关 | 2020-05-11 | 115 |
| 移动终端护壳及移动终端 | 2020-05-08 | 348 |
| 三觉优势特质评测仪 | 2020-05-08 | 50 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台，是提供专利分析，专利查询，专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据，免费查、免费专利分析。
分析报告
专利汇分析报告产品可以对行业情报数据进行梳理分析，涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度，系统通过AI智能系统对图表进行解读，只需1分钟，一键生成行业专利分析报告。
触摸板热门专利
QQ群二维码
意见反馈
意见反馈