外界触发的通知专利检索-传感器变压器和转换设备专利检索查询-专利查询网

外界触发的通知

阅读：0发布：2021-02-02

专利汇可以提供外界触发的通知专利检索，专利查询，专利分析的服务。并且本公开涉及外界触发的通知。提供了基于从传感器接收到的外界环境的激励信号在触觉输出设备上呈现触觉效果的方法。确定基于激励信号的通知事件。触觉效果基于通知事件被呈现在触觉输出设备上。还提供了用于基于外界环境的激励信号在触觉输出设备上呈现触觉效果的系统和计算机可读介质。，下面是外界触发的通知专利的具体信息内容。

权利要求

1.一种呈现触觉效果的方法，包括：
由传感器接收外界环境的激励信号；
由处理器解码包括在外界环境的激励信号中的嵌入式消息；
由处理器确定基于嵌入式消息的通知事件；
由触觉使能显示设备基于通知事件呈现显示输出；以及
由触觉使能显示设备基于通知事件呈现触觉效果。
2.如权利要求1所述的方法，其中外界环境的激励信号包括音频输入、运动输入或视觉输入。
3.如权利要求2所述的方法，其中音频输入在16Hz和17,000Hz之间的范围之外。
4.如权利要求1所述的方法，其中通知事件与警报相关联。
5.如权利要求1所述的方法，其中解码嵌入式消息和确定通知事件包括：
获取外界环境的激励信号的指纹；
将指纹与指纹的数据库进行比较；以及
基于指纹选择通知事件。
6.如权利要求1所述的方法，其中解码嵌入式消息包括：
检测外界环境的激励信号中的嵌入式隐写消息；
将隐写消息解码为解码消息；以及
基于解码消息选择通知事件。
7.如权利要求1所述的方法，还包括：
估计外界环境的激励信号的时间码；以及
基于估计出的时间码选择要呈现的触觉效果。
8.如权利要求1所述的方法，其中确定通知事件包括比较嵌入式消息与通知事件的表格。
9.如权利要求8所述的方法，其中比较嵌入式消息与通知事件的表格包括执行远程数据查找。
10.如权利要求1所述的方法，其中基于嵌入式消息的通知事件是特定于接收外界环境的激励信号的位置而确定的。
11.如权利要求1所述的方法，其中嵌入式消息包括字节码或文本消息中的至少一个。
12.如权利要求1所述的方法，还包括由触觉使能显示设备基于通知事件呈现音频输出。
13.一种用于呈现触觉效果的系统，包括：
包括处理器的触觉使能显示设备，被配置为：
从至少一个传感器接收外界环境的激励信号；
解码包括在外界环境的激励信号中的嵌入式消息；
确定基于嵌入式消息的通知事件；
基于嵌入式消息呈现显示输出；以及
基于嵌入式消息呈现触觉效果。
14.如权利要求13所述的系统，其中外界环境的激励信号包括音频输入、运动输入或视觉输入。
15.如权利要求14所述的系统，其中音频输入在16Hz和17,000Hz之间的范围之外。
16.如权利要求13所述的系统，其中通知事件与警报相关联。
17.如权利要求13所述的系统，其中处理模块还被配置为：
获取外界环境的激励信号的指纹；
将指纹与指纹的数据库进行比较；以及
基于指纹选择通知事件。
18.如权利要求13所述的系统，其中处理模块还被配置为：
检测外界环境的激励信号中的嵌入式隐写消息；
将隐写消息解码为解码消息；以及
基于解码消息选择通知事件。
19.如权利要求13所述的系统，还包括时间码估计模块，其被配置为估计外界环境的激励信号的时间码，其中处理模块还被配置为基于估计出的时间码确定触觉效果。
20.如权利要求13所述的系统，其中触觉使能显示设备还被配置为通过比较嵌入式消息与通知事件的表格来确定通知事件。
21.如权利要求20所述的系统，其中触觉使能显示设备还被配置为通过执行远程数据查找来比较嵌入式消息与通知事件的表格。
22.如权利要求13所述的系统，其中触觉使能显示设备还被配置为还基于接收外界环境的激励信号的位置来确定通知事件。
23.如权利要求13所述的系统，其中嵌入式消息包括字节码或文本消息中的至少一个。
24.如权利要求13所述的系统，其中触觉使能显示设备还被配置为基于通知事件呈现音频输出。

说明书全文

外界触发的通知

技术领域

[0001] 一种实施例针对通知系统。更具体而言，一种实施例针对可以基于外界输入来输出通知的通知系统。

背景技术

[0002] 用户可以在其电话或其它电子设备上接收警报。通常，用户将与发送警报的实体具有关系并且警报将通常基于一些以数字方式接收到的信息来生成。例如，用户可以安装天气应用。天气应用可以以数字方式连接到天气状态服务器、接收警报、以及通过触发电话发出蜂鸣声或振动将警报将应用继续传递给用户。

[0003] 常规的系统基于与警报提供者建立的关系来提供警报并且使用设备的数据能力来接收生成警报的信息。发明内容

[0004] 实施例包括在触觉输出设备上呈现触觉效果的方法。外界环境的激励信号可以从传感器被接收到。基于激励信号的通知事件可以被确定。触觉效果可以基于通知事件呈现在触觉输出设备上。其它实施例包括在触觉输出设备上呈现触觉效果的系统和计算机可读介质。附图说明

[0005] 图1是根据本发明的一种实施例的通知系统的框图。

[0006] 图2是根据本发明的一种实施例的通知系统的框图。

[0007] 图3是根据一种实施例的用于提供通知的流程图。

[0008] 图4是根据一种实施例的用于提供具有嵌入式隐写消息的通知的流程图。

[0009] 图5是根据一种实施例的用于接收和解码包含嵌入式隐写消息的通知信号激励的流程图。

[0010] 图6是示出根据一种实施例的外界音频通知系统的系统图。

[0011] 图7是示出根据一种实施例的外界音频通知系统的系统图。

[0012] 图8是示出根据一种实施例的外界音频通知系统的系统图。

[0013] 图9是示出根据一种实施例的外界音频通知系统的系统图。

[0014] 图10是示出根据一些实施例的同步触觉效果的流程图。

具体实施方式

[0015] 实施例允许设备用户在无需预先存在的与警报提供者的关系的情况下和在无需数据连接的情况下接收通知或警报。外界环境中的激励可以被设备感测到。在一种实施例中，设备可以识别激励并且基于所识别的激励提供通知或警报。在一种实施例中，设备可以解码嵌入在激励中的信息并且基于所解码的激励提供警报。在一些实施例中，可以使用数据连接来增强警报信息。在一些实施例中，可以事先建立为设备持有者设置用于可进一步增强警报信息的警报类型的首选项的设备用户和警报提供者之间的关系。

[0016] 为用户甚至在没有预先存在的关系和甚至在用户的设备上没有可用的数据连接的情况下生成引人注意的警报可能是所期望的或者重要的。例如，商店可能想就销售或特别的促销提醒购物者。急救人员可能想就关于存在紧急车辆或紧急疏散情况提醒当地区域中的人们。剧院可能想就表演的开始或中场休息结束提醒参加者。通常，为了实现广播警报，可以使用公共广播系统、警笛或其它常规机制(例如闪烁场灯)。但是，在一些情况下，这可能不能在用户当中提供期望的关注水平。在一些情况下，这种警报会失去其作为警报的有效性，因为用户已习惯它们并开始忽略它们以及把它们仅仅当作背景噪声。例如，警笛在纽约市有时会是普遍存在的。而且，这些警报局限于常规的系统并且不发送到设备。

[0017] 与此对照，本文所描述的实施例在现有广播媒体(例如，音频)内部编码信息，使得智能设备可以将这种信息转换为适于在一对多的通信需求中使用的通知框架。在一些实施例中，通知框架可以提供在触觉输出设备上呈现的通知事件，如以下描述的。通知可以被限制到用于本地区域(例如，商场或城市街道)的广播媒体的区域，但是在一些实施例中，通知可以通过现有的媒体流(例如，广播电视)被输送，以触及更大范围的受众。

[0018] 取决于通知机制，有若干种通知或警报可用。品牌警报可以与商业使用有关，用于就特定商店或品牌的交易和销售通知或提醒周围区域内的用户。基于位置的提示警报可以为周围区域内的用户在该地区附近提供一些特定事件的通知或警报。例如，在剧场中的用户仅通过处于触发触觉警报系统来提供触觉效果的激励的周围区域中，就可以被通知表演将要开始。在另一个例子中，啁啾人行横道信号可以对用户设备触发与人行横道状态相关的警报。在另一个例子中，商场中的商店可以使商场音乐系统播放旨在通过音乐中嵌入的消息将驱使人流到该商店的闪售通知。在这个例子中，商场音乐系统可以被配置为在商场中选择的扬声器中(例如，在具有这种销售的商店附近)播放嵌入在商场音乐中的警报激励，使得商场中具有可穿戴设备或移动设备的用户可以基于他们的位置得到警报，并且引导他们到该商店来。紧急警报可以向警报激励的周围区域内或者警报激励的广播区域内(例如，电视或无线电广播输出的周围区域内)的用户提供与紧急情况有关的警报，诸如疏散或险情。紧急车辆警笛可以包含将向周围范围内的所有用户提供附加警报的编码。这将有利于聋人或没有注意到声音的用户。例如，车辆传感器可以接收警笛激励，并且通过驾驶员的座位、方向盘或移动设备向他们提供触感警报。除了这些类型的警报之外，其它警报可以包括在无需预先存在的设备关系的情况下，通过用户的可穿戴设备、移动设备或个人设备从适当配备的物理接口给用户的警报或通知。例如，智能灯开关可以配备有扬声器，以在用户交互期间发出不可听见的声音，其可以被用户的可穿戴设备接收到并且用来激励触觉效果作为警报，或许是开关将自动关闭灯光以警告房间中的任何用户如果需要则重新接合开关的警报。

[0019] 通知或警报可以属于以上示例类别中的多个、另一个类别或根本不属于任何类别。在一些实施例中，警报可以被理解为是利用如本文所描述的外界技术发送到可接收信息并且利用通知设备提供信息的设备的任何信息。警报可以被认为是紧急通知。

[0020] 在一些实施例中，引起通知的外界激励可以触发用户的设备连接到云服务并且基于用户的简档或首选项或与警报广播者的关系提供个人多模式通知和/或动作。例如，在接收到通知之后，用户的简档可以改变用户可以接收哪种类型的特殊优惠，或者可以导致发送电子邮件、更新社交网站、发生信用卡活动、触发服务或一些其它下游活动。在一些实施例中，用户首选项可以被高速缓存在用户的设备上，使得如果没有数据连接可用也可以提供个性化的通知。

[0021] 在一些实施例中，用户可以选择加入或选择退出某些类型的通知，诸如基于品牌或位置的通知。可以禁止紧急警报被选择退出。但是，在一些实施例中，即使这些也可能被选择退出。选择加入首选项可以允许用户通过到云或服务器的数据连接来接收个性化的供应(offer)。

[0022] 在一些实施例中，通知可以经由设备的屏幕和/或扬声器提供给用户的设备。在一些实施例中，通知可以经由与用户的设备相关联的触觉输出设备来提供。

[0023] 图1是根据本发明的一种实施例的通知系统10的框图。系统10可以包括设备30，其包括触觉输出设备18。系统10内部是在系统10上生成触觉的触觉反馈系统。在一种实施例中，触觉效果通过触觉输出设备18来生成。系统10可以是诸如电话或平板电脑的手持式设备、诸如智能手表或智能眼镜的可穿戴设备、或结合其它设备工作的附件设备，诸如与其它设备结合工作的智能手表或智能眼镜。系统10可以包括显示器和/或扬声器(未示出)。系统10也可以是在用户附近或与用户接触的设备，诸如车座位、方向盘、显示器、铃、口哨、或能够提供可以被感知的触觉效果的任何设备。

[0024] 触觉反馈系统包括处理器或控制器12。耦合到处理器12的是存储器20和触觉输出设备驱动电路16，触觉输出设备驱动电路16耦合到位于设备30上的触觉输出设备18。触觉输出设备18可以包括任何类型的触觉输出设备，包括电动机、致动器、静电摩擦(“ESF”)设备、超声频率(“USF”)设备、以及可以用来向用户提供触觉反馈的任何其它触觉输出设备。

[0025] 其它此类触觉输出设备18可以包括柔性的、半刚性的或刚性的材料，包括智能流体致动器、流变流体致动器、宏观纤维复合(“MFC”)致动器、形状记忆合金(“SMA”)致动器、压电致动器和微机电系统(“MEMS”)致动器。

[0026] 处理器12可以是任何类型的通用处理器，或者可以是专门设计为提供触觉效果的处理器，诸如专用集成电路(“ASIC”)。处理器12可以是操作整个系统10的同一处理器，或者可以是分别的处理器。处理器12可以基于高级参数决定要播放什么触觉效果和其中效果被播放的次序。如果触觉效果包括在(一个或多个)触觉输出设备中生成触觉效果时的某种变化或者包括基于用户与手持式或可穿戴设备30的交互或系统10的一些其它方面的在生成触觉效果时的变化，则触觉效果可以被认为是“动态的”，其中这些其它方面诸如基于接收到的激励指定用于触觉效果的参数的用户首选项。

[0027] 处理器12向触觉输出设备驱动电路16输出控制信号，其中触觉输出设备驱动电路16包括用来向触觉输出设备18提供所需电流和电压以引起期望的触觉效果的电子部件和电路系统。系统10可以包括多于一个的触觉输出设备18，并且每个触觉输出设备18可以包括分别的驱动电路16，所有的驱动电路都耦合到共同处理器12。存储器设备20可以是任何类型的存储设备或计算机可读介质，诸如随机存取存储器(“RAM”)或只读存储器(“ROM”)。
存储器20存储可由处理器12执行的指令。在指令当中，存储器20包括外界触发的触觉效果模块22，其是当被处理器12执行时为触觉输出设备18生成基于外界激励提供触觉效果的驱动信号的指令，如下面更详细地公开的。存储器20也可以位于处理器12的内部，或者是内部和外部存储器的任意组合。

[0028] 系统10包括可以感测外界环境的各方面的一个或多个传感器17。例如，传感器17可以包括捕获环境条件的温度/湿度/气压传感器，具有表征设备的运动、速度、加速度和朝向的加速度计、陀螺仪和磁力计的内场测量单元(“IMU”)、捕获音频信息的麦克风、捕获视觉信息的光学传感器、以及从/向其它设备无线地接收/发送信息的无线发射器。一般而言，传感器17可以包括被配置为或适于感测外界输入的方面的任何感测设备，诸如但不限于加速度计、电容式传感器、霍尔效应传感器、红外线传感器、超声波传感器、压力传感器、光纤传感器、柔性传感器(或弯曲传感器)、力敏感电阻器、负载传感器、LuSense CPS2 155、微型压力换能器、压电传感器、应变计、线性位置触摸传感器、线性电位计(或滑块)、线性可变差分变压器、指南针、测斜器、磁性标签(或射频识别标签)、旋转编码器、旋转电位计、陀螺仪、通断开关、麦克风、光度计、测高仪、生物监视器、相机或光敏电阻器。在可替代的实施例中，除了传感器17之外，系统10还可以包括一个或多个附加的传感器(未在图1中示出)。在一些这种实施例中，传感器17和这一个或多个附加的传感器可以是传感器阵列的部分，或一些其它类型的传感器集合。传感器集合不必在同一个设备上找到。例如，传感器输入数据可以包括来自诸如与设备的外围设备(例如，智能手表或可穿戴设备)相关联的传感器这样的与设备相关联的多个传感器的数据。传感器17可以将传感器信息提供给处理器12。来自传感器17的传感器信息可以通过常规的有线或无线技术提供给处理器12。

[0029] 在一些实施例中，触觉输出设备18是系统10的可选特征，并且与系统相关联的通知可以经由与系统10相关联的显示器或扬声器来提供。

[0030] 图2是根据本发明的一种实施例的通知系统的框图。环境激励源205可以被输出到传输介质210。设备220和230，诸如智能手表和电话，可以对应于系统10并且可以通过传输介质接收激励。可选地，设备220和230可以彼此通信，诸如当一个设备是另一个设备的附件时。可选地，设备220和230可以与在240处的基于云的或远程的服务器进行通信。在一些实施例中，信息可以从(例如，云中的)服务获得，或者可以在云计算环境中操作。云计算环境(即，“云”)可以是其中计算服务没有被拥有但是按需被提供的环境。例如，信息可以驻留在联网的云中的多个设备上和/或数据可以存储在云内的多个设备上。在一些实施例中，可以使用远程服务器将信息提供给设备220或230。

[0031] 图3是根据一种实施例的用于提供通知的流程图。在一种实施例中，图3(以及下面图4-5和9)的流程图的功能由存储在存储器或其它计算机可读或有形介质中并且由处理器执行的软件来实现。在其它实施例中，功能可以由硬件(例如，通过使用专用集成电路(“ASIC”)、可编程门阵列(“PGA”)、现场可编程门阵列(“FPGA”)等)、或者硬件和软件的任意组合来执行。

[0032] 在305处，提供程序用于在设备上使用，该设备诸如图1的系统设备10。程序可以是设备本地的(native)，诸如设备的操作系统程序的组成部分、由原始设备制造商提供的程序、或由第三方创建者提供的程序(诸如用户安装的应用)。第三方应用可以在此类应用的市场处提供。

[0033] 在310处，激励被诸如设备10的设备感测到。设备可以处于连续的感测状态。激励可以是位于设备上的传感器可以感测到的任何外界激励。在一些实施例中，激励可以是由麦克风感测到的音频声波。在一些实施例中，激励可以是由光学传感器(例如，相机或扫描仪)感测到的光输入。在一些实施例中，激励可以是由加速度计、陀螺仪或压力传感器感测到的设备10的移动。在一些实施例中，激励可以是与压力分布(profile)相关的压力变化。例如，设备10可能会与具有特定静态压力分布的表面(例如，压纹表面)直接接触或者用户可以构建具有特定压力分布的手势。这种分布可以被用来识别随后被提供回给用户的通知事件。在一些实施例中，激励可以是可被人类感知的，而在其它实施例中，激励可能是不可被人类感知的。例如，对于音频信号，音频信号的音高可能在正常人类听觉的灵敏度范围之外，但是在麦克风传感器的灵敏度范围之内，其中正常人类听觉的灵敏度范围大约为16-
17,000Hz。

[0034] 在315处，激励可以被处理。在一些实施例中，激励可以通过对激励指纹辨识(fingerprint)来处理。例如，音频信号可以被采样和指纹辨识。对音频指纹辨识允许音频在将音频信号的指纹与音频指纹的数据库进行比较时被识别。可以使用任何合适的技术来指纹辨识。例如，对音频指纹辨识可以通过类似于以下的过程来完成。首先，音频信号可以被下采样，以减少可能的样本数。接着，样本的谱图可以被计算出。接着，可以在谱图上执行频带滤波，以进一步降低信号的复杂度。滤波可以为谱图产生对数间隔的区间(bin)。接着可以使用小波分解来进一步降低复杂度，例如通过应用标准Haar小波分解。较大的小波可以被保留，同时丢弃没有贡献多少信息的小波。这些指纹可以通过最小哈希和位置敏感哈希被进一步减少。

[0035] 类似的指纹辨识技术可以用于光学或其它外界传感器激励。在一些实施例中，可以使用图案识别或其它合适的算法。例如，道路中的一系列凸起可以产生可被加速度计或压力传感器感测到并且被处理以确定用户的速度或被处理以生成关于接近交叉路口的警报的图案。例如，压纹表面可以具有可被与设备10相关联的压力感测设备检测到的特定压力分布。

[0036] 在一些实施例中，激励可以通过应用逆隐写算法以解码包含嵌入式隐写信息的激励来处理。隐写信息编码可以应用到视觉和听觉信息。隐写算法可以以对人类难以察觉到的方式利用数据替换激励的部分。例如，音频文件可以具有通过以周期性的时间间隔利用消息信息替换信号信息而隐藏在其中的隐写签名。被替换的信号信息可以包括例如最低有效的两个位，从而当被呈现时最小限度地影响音频文件。逆操作也可以应用于提取隐写式编码的签名。音频可以被捕获并且被采样，直到隐写图案被发现。信息可以从隐写图案中捕获并且用来确定嵌入的消息。可以使隐写数据变得健壮，以考虑捕获的音频信号的损耗。普通技术人员将理解，任何其它可用的技术可以取代隐写技术来在激励音频、视频或其它所适用的当中嵌入签名或消息。

[0037] 处理还可以包括获取经指纹辨识的激励并且将它与数据库进行比较以对激励进行分类。例如，可以使用经指纹辨识的声音来确定是什么声音。警笛的声音可以被指纹辨识，并且与匹配警笛的指纹数据库进行比较。在隐写式嵌入的消息的情况下，处理还可以包括分析消息并且将它与一组已知的消息进行比较或提供消息。

[0038] 在320处，基于所处理的激励来确定通知事件。通知事件可以包括发送到诸如设备30的设备的输出机制的通知。输出机制可以包括显示器、扬声器、触觉输出设备，等等。例如，对于经指纹辨识的音频激励，识别出的音频信号可以对应于用于提醒设备用户的特定触觉效果。例如，识别出的警笛信号可以使得振动触感触觉效果被确定并且在设备上输出。
在利用隐写式嵌入的消息的实施例中，通知事件可以基于嵌入的消息来确定。例如，消息可以包含字节码、文本、振动图案，等等。例如，消息可以包含可被交叉引用到触觉效果、音频输出和/或显示输出信号作为通知事件的代码。一个或多个通知事件可以基于所处理的激励来产生。在一些实施例中，用户可以为基于经指纹辨识的音频激励或隐写式嵌入的消息应当确定何种类型的通知事件或触觉效果来设置首选项。在一些实施例中，与设备相关联的显示器或与设备相关联的扬声器可以提供协调的信息。例如，响应于警笛，触觉效果可以在电话上被确定，电话可以在电话的显示器上显示“紧急”通知，并且可以在电话上或连接的蓝牙扬声器上播放报警声。

[0039] 在325处，通知事件或触觉效果被提供在设备上，该设备诸如图1的设备30。在其中通知事件是触觉效果的实施例中，通知事件可以通过在设备中的触觉输出设备上播放或呈现触觉效果来提供。在一些实施例中，触觉输出设备，诸如图1的触觉输出设备18，可以位于可穿戴设备中或位于附近。

[0040] 图4是根据一种实施例的用于提供具有嵌入式隐写消息的通知的流程图。在405处，输入信号被接收到。在410处，确定通知要被包括在信号中。通知可以是到消息的查找表或类似机制—诸如数据库—的代码或消息。在一些实施例中，消息或警报可以为安全起见被加密。

[0041] 在415处，应用隐写算法将通知(即，消息或代码)嵌入到信号中，以产生包括在输入信号中隐写式嵌入的消息的通知信号激励。可以使用任何适当的隐写算法。例如，对于音频信号，可以使用利用最低有效位编码、奇偶编码、相位编码、扩频、回声隐藏或其它合适算法的隐写算法。

[0042] 在420处，具有嵌入式隐写编码的通知信号激励被发送。如果信号是音频文件，则传输可以经由扬声器来完成。(如果信号是视觉文件，则)传输可以经由数据发射器(和显示器)来实现。其它实施例可以使用其它适当的传输介质。

[0043] 图5是根据一种实施例的用于接收和解码包含嵌入式隐写消息的通知信号激励的流程图。在505处，具有嵌入式隐写消息(即，作为消息或代码的通知信息)的输入激励被接收到。在510处，逆隐写算法可以被应用。逆算法可以基于用来创建隐写激励的算法的类型来选择。算法可以对激励采样，以确定如何应用逆算法。在一些实施例中，如果解码消息被加密，则它可以被解密。

[0044] 在515处，通知事件，诸如触觉效果，可以从隐写消息来确定。通知事件可以基于通知消息或由通知消息来指定，或者可以在使通知消息与通知事件(例如，与触觉效果相关的代码)相关的表或数据库中进行查找。用户首选项可以指定可插入或修改使通知消息与通知事件相关的查找条目的首选项。在520处，可选的远程数据“云”查找可以或者从云、服务器或者从来自先前的云或服务器响应的本地高速缓存中发生。例如，接收到的消息可以与位于服务器中的首选项相关并且基于远程首选项交付通知事件。例如，消息可以是代码“0xFFFF”，其对应于在播放音乐的商店中的优惠券供应，其中该音乐具有作为通知消息嵌入其中的隐写消息。“0xFFFF”可以在用户的设备上本地查找，以向用户提醒该优惠券并且提供消息“这家店提供促销。详情请参见附文”。利用云查找，“0xFFFF”可以被交叉引用到存储在云中或服务器上的附加数据，诸如用户首选项、选择加入的信息或营销信息，以指定定制的消息，诸如“只为你今天促销毛巾Phil——买2个或更多个打25％的折扣”。利用基于云的查找，其它设备信息也可以通过数据连接被发送到云或服务器，以生成个性化的响应。例如，设备的国际移动设备标识(“IMEI”)码(通常在电话和其它移动设备中)、电话号码、GPS位置或其它可用的数据可以被提供给云或服务器。

[0045] 在525处，可以提供通知事件。例如，如果通知事件是警报，则警报可以被发送到用户的设备以引起触觉效果，诸如振动，并且消息可以可选地显示在设备的显示器上。

[0046] 图6是示出根据一种实施例的外界音频通知系统的系统图。要素605是由波形图表示的音频信号。要素605被传递给对应于图2的环境激励源205的扬声器205。广播扬声器205发送音频信号作为在传输介质210中的声音，传输介质210可以是空气、水、固体，等等。位于对应于图1的系统10的设备中的麦克风传感器接收音频。设备在要素620处具有对音频指纹辨识的模块。通知标识符在模块630处基于经指纹辨识的音频和通知信息——例如使通知事件标识符与通知消息相关的信息——来确定。在模块640处，通知事件，诸如触觉效果，可以基于通知事件标识符来确定。在一些实施例中，触觉通知模块640可以使用来自Immersion公司的“Instinctive Alerts Framework”。在一些实施例中，通知事件可以对应于发送到与系统10相关联的扬声器或显示器的音频输出或显示输出。在一些实施例中，通知事件可以对应于可在与系统10相关联的图1的触觉输出设备18(诸如，在电话上或在诸如可穿戴设备或其它外围设备的附件设备上的致动器)上播放的触觉效果。在一些实施例中，与通知事件相关的消息可以在设备的显示器上显示(未示出)。

[0047] 图7是示出根据一种实施例的外界音频通知系统的系统图。要素705是由波形图表示的音频信号。要素705的音频信号具有嵌入式隐写通知消息。要素705被传递给对应于图2的环境激励源205的扬声器205。广播扬声器205发送音频信号作为在传输介质210中的声音，传输介质210是空气、水、固体，等等。位于对应于图1的系统10的设备中的麦克风传感器接收音频。设备在要素720处具有应用逆隐写算法的模块，以检索嵌入的通知消息。如果消息为安全起见被加密，则它可以被解密。通知事件标识符在模块630处基于嵌入的消息和通知信息——例如，使通知事件标识符与通知消息相关的信息——来确定。在模块640处，通知事件可以基于通知事件标识符来确定。在一些实施例中，通知事件可以对应于发送到与系统10相关联的扬声器或显示器的音频输出或显示输出。在一些实施例中，通知事件可以对应于可在与系统10相关联的图1的触觉输出设备18(诸如，在电话上或在诸如可穿戴设备或其它外围设备的附件设备上的致动器)上播放的触觉效果。在一些实施例中，与通知事件相关的消息可以在设备的显示器上显示(未示出)。

[0048] 图8是示出根据一种实施例的外界音频通知系统的系统图。要素705是由波形图表示的音频信号。要素705的音频信号具有嵌入式隐写消息。要素705被传递给对应于图2的环境激励源205的扬声器205。广播扬声器205发送音频信号作为在传输介质210中的声音，传输介质210可以是空气、水、固体，等等。位于对应于图1的系统10的设备中的麦克风传感器接收音频。设备在要素720处具有应用逆隐写算法的模块来检索嵌入的消息。如果消息为安全起见被加密，则它可以被解密。通知事件标识符在模块630处基于嵌入的消息和通知信息——例如，使通知事件标识符与消息相关的信息——来确定。模块835可以建立到使用该消息来确定云警报信息的云服务器或其它远程服务器的连接。基于云的信息可以包括特定于接收到隐写消息的用户的信息。在模块840处，通知事件，诸如触觉效果，可以基于云警报信息来确定。在一些实施例中，通知事件可以对应于发送到与系统10相关联的扬声器或显示器的音频输出或显示输出。在一些实施例中，通知事件可以对应于可在与系统10相关联的图1的触觉输出设备18(诸如，在电话上或在诸如可穿戴设备或其它外围设备的附件设备上的致动器)上播放的触觉效果。在一些实施例中，与通知事件相关的消息可以在设备的显示器上显示(未示出)。

[0049] 图9是示出根据一种实施例的外界音频通知系统的系统图。具体地，图9示出了用于将音频信号转换为具有嵌入式隐写消息或签名的音频信号的系统。要素605是音频信号。模块905是可利用用于将消息、签名或其它通知信息嵌入到音频流中的通用处理器或专用处理器来实现的隐写算法。模块905也可以包括加密模块来在嵌入之前加密消息或签名。在一些实施例中，签名可以被烧入到可接收音频信号、应用签名和发送音频的芯片中，芯片诸如微控制器、FPGA等。要素705是具有嵌入式隐写消息或签名的音频信号。例如，在人行横道处的啁啾声可以通过模块905利用烧入的消息或签名进行修改，以提供在听觉上难以区分但包含隐写签名的经修改的啁啾声。

[0050] 在一些实施例中，可以使用自动内容识别(“ACR”)将触觉效果与激励同步。ACR技术通常用来将第二屏应用同步到媒体广播。触觉效果或触觉轨道可以利用ACR技术来同步。可以使用图案识别技术来检测音频信号中指定音频信号的定时要素的水印。可以使用定时要素来估计呈现的媒体要素(即，被流传输、回放或显示为视觉或音频警报要素)的时间戳。
例如，歌曲可以包含贯穿整个歌曲变化的水印。在歌曲中的时间t处可以期望水印W。当水印W被发现时，伴随音频的媒体可以接着被同步到时间t。此外，用于媒体的触觉轨道可以被同步到同一时间戳估计。在另一种实施例中，编码的水印可以包含媒体的时间戳，即，用于媒体的时间戳被编码为媒体中的水印。

[0051] 在另一种实施例中，可以使用指纹将触觉效果同步到音频激励，诸如广播音频声波。指纹辨识可以如上所述被使用来识别特定的激励(例如，音轨)。指纹辨识还可以用来识别与激励的经指纹辨识的部分相关联的时间戳。例如，如由麦克风接收到的音频激励的一部分可以与激励的已知部分进行比较，以找出经指纹辨识的部分在源音频中的哪里。利用关于文件的这种信息，时间戳可以从文件中得到。在与另一种实施例一致的另一个例子中，如由麦克风接收到的音频激励的一部分可以与查找表(或数据库等)进行比较，以找出具有与其相关的时间戳的相同部分。

[0052] 实施例可以使用ACR技术来播放用于激励的触觉轨道。例如，歌曲可以根据图3的流程被识别、时间戳被估计、并且触觉轨道同步到歌曲地被播放(作为触觉效果警报要素)。例如，歌曲可能是美国的国歌、在体育事件的战斗歌曲、或一些其它可识别的歌曲。触觉轨道不一定必须被嵌入在激励中，而是可以存在于设备上或者可以从云或服务器中下载或流传输。代替触觉轨道，不同的触觉效果(或警报)可以基于激励(例如，音轨)的定时估计被触发。

[0053] 在一些实施例中，视频可以被同步到音轨和触觉轨道。轨道可以是异步的并且可以根据水印或指纹进行同步。例如，来自电影的剪辑可以被播放。音频流可以被加水印或进行指纹辨识，以确定对该剪辑估计出的时间戳，并且用于整个电影的相关联的触觉轨道可以被跳到根据音频剪辑的估计出的时间戳的相关时间。

[0054] 在另一种实施例中，诸如图1的设备10的设备可以具有通过代码识别的一组嵌入式触觉效果。作为创建触觉轨道或特定的触觉效果的替代，信息可以利用隐写技术或其它技术被嵌入到音轨中。嵌入的信息可以包含触觉效果码和相关联的参数，诸如强度、持续时间、相对定时，等等。当触觉回放系统检测到嵌入的效果码和参数时，它可以根据效果码和参数准备触觉效果，并且在指定的相对定时处交付它。

[0055] 图10是示出根据一些实施例的同步触觉效果的流程图。在1010处，音频输入信号被接收到。如以上所公开的，音频输入信号可能可选地处于在人类听觉的正常范围之外的音高范围。音频信号可以具有指定时间码、触觉效果码和参数的嵌入式签名或水印。在一些实施例中，时间码信息可以从音频信号的指纹来估计。在1020处，图案、指纹、水印或签名可以在音频信号中被检测到。在1030处，时间码可以从图案、指纹、水印或签名来估计。在一些实施例中，1030可以被跳过，诸如当用于触觉效果的效果码被嵌入在水印或签名中时。在1040处，如果使用了触觉轨道，则触觉轨道可以被跳到估计出的时间码。如果触觉效果被匹配到时间码，则触觉效果可以对于估计出的时间码进行检索。如果使用了触觉效果码，则触觉效果可以根据触觉效果码进行查找，并且可选的参数可以被设置，用于播放触觉效果。在
1050处，触觉效果在诸如图1的触觉输出设备18的触觉输出设备上被播放。

[0056] 使用图10的流程的一个例子是其中用户正在电视上看电影。用户的腕戴设备可以嵌有一些与不同电影有关的触觉轨道。在捕获和识别电影中的特定音频水印时，ACR系统将触觉轨道同步到媒体并且开始在可穿戴设备上回放相关的触觉轨道/效果。另一个例子是其中用户正在他的平板电脑上观看利用本文描述的触觉播放特征增强的斯坦利杯决赛。与比赛流相关的触觉效果参数作为水印被嵌入在比赛的音频信号中。当分析音频信号时，系统可以检测到水印并且利用特定的参数回放触觉效果。

[0057] 如所公开的，实施例提供了用于生成可以伴随智能电话、智能设备或外围设备上的视觉或音频警报的、诸如触觉效果警报的通知事件的系统。环境的外界条件可以提供被设备上的传感器检测到的激励。激励可以针对图案识别、指纹辨识、水印或签名信息进行处理。信息可以匹配到已知图案或指纹的数据库，或者在水印或签名嵌入的情况下，可以提取指定警报或触觉信息的信息。经处理的信息可以被传递给使通知事件在设备上发生的通知系统。一些实施例不需要先前的关系或数据连接。一些实施例可以使用根据先前的关系建立的数据连接和/或首选项，以增强或定制警报输出。一些实施例可以利用这些技术使触觉效果信息与音频信号同步。

[0058] 本文具体说明和/或描述了若干种实施例。但是，应当理解，所公开的实施例的修改和变化都被上述示教所涵盖并且在权利要求的权限之内，并没有脱离本发明的精神和意图范围。

标题	发布/更新时间	阅读量
陶瓷压力接管上的压力传感器	2020-05-08	119
带有压靠弹簧的传感器	2020-05-11	678
传感器控制设备和图像形成设备	2020-05-11	594
用于识别对象的方法和设备	2020-05-08	13
用于分配卫生产品的分配器及操作所述分配器的方法	2020-05-08	944
可充电电池短路预测装置和可充电电池短路预测方法	2020-05-08	566
在低温下具有高灵敏度的气体传感器装置及其制造方法	2020-05-08	151
水处理系统	2020-05-08	232
采用反馈和输入驱动器增强的原声乐器	2020-05-08	816
力矩传感器以及转向装置	2020-05-11	811

外界触发的通知

外界触发的通知

技术领域

背景技术

具体实施方式

该功能需要专业版企业版VIP权限，您可以：