首页 / 专利库 / 医疗设备 / 视觉反馈 / 基于多频率时序编码的稳态听觉诱发电位脑-机接口方法

基于多频率时序编码的稳态听觉诱发电位脑-机接口方法

阅读:390发布:2020-05-11

专利汇可以提供基于多频率时序编码的稳态听觉诱发电位脑-机接口方法专利检索,专利查询,专利分析的服务。并且基于多 频率 时序编码的稳态听觉 诱发电位 脑‑机 接口 方法,先在使用者头部安放 电极 ,测得的脑电 信号 送往计算机;然后分别使用不同的 载波频率 制作左 耳 和右耳的音频刺激单元,再用n个调制频率时序组合对音频刺激单元进行调制,形成多频率时序组合编码的音频刺激单元;然后通过耳机分别在使用者左右耳内同时播放音频刺激单元,使用者集中听觉注意 力 于左右耳音频刺激单元中的一个,计算机同步采集刺激开始与结束标志位,并通过测试电极采集脑 电信号 ,计算出信号与不同刺激目标的相关系数向量,通过线性判别模型判定并通过屏幕和耳机同时指示出目标,再进行下一次目标识别;本 发明 能够显著增强脑‑机接口编码的特异性,提升现有脑‑机接口的 精度 和效率。,下面是基于多频率时序编码的稳态听觉诱发电位脑-机接口方法专利的具体信息内容。

1.基于多频率时序编码的稳态听觉诱发电位脑-机接口方法,其特征在于,包括以下步骤:
步骤1,在使用者头部听觉颞区安放测量电极,在其单侧位置处安放参考电极,在其头部前额处安放地电极,电极测得的脑电信号经放大和模数转换后送往计算机;
步骤2,形成左右耳的音频刺激单元:左耳和右耳的音频刺激单元分别采用不同频率的纯音作为载波,每个音频刺激单元被从时间上划分成n段,n为大于1的整数,对每段音频刺激单元分别选取不同调制频率进行幅值调制,每段选取的调制频率不重复,从而形成n的阶乘即n!种调制方案,并从中选择一种调制方案制作音频刺激单元,将左右耳音频刺激单元分别同时呈现在使用者的左耳和右耳内,耳机音量被调节到舒适的平;
步骤3,使用者集中听觉注意于左右耳两个音频刺激单元中的任意一个,使用者注意听辨的音频刺激单元称为目标,而另一侧的音频刺激单元称为非目标;
计算机同步采集刺激开始与结束标志位,并通过测试电极采集脑电信号,使用典型相关分析CCA算法计算出脑电信号与调制频率的相关系数,具体包含以下操作:
首先,对脑电信号作滤波和陷波处理;其次,获得脑电数据中依照刺激起始标志位和结束标志位进行截断的数据段;最后,将数据段送入典型相关分析CCA算法中,将脑电数据分别与利用左、右耳调制频率制作的模板进行比较,得到脑电数据与左耳每段调制频率的相关系数ρ1,ρ3,…,ρ2n-1,及脑电数据与右耳每段调制频率的相关系数ρ2,ρ4,…,ρ2n,其中n为大于1的整数,表示刺激频率的个数;将2n个相关系数按下标顺序组成相关系数向量ρtotal=[ρ1,ρ2,ρ3,ρ4,…,ρ2n]T;
步骤4,离线分析:重复步骤3若干次,得到一组相关系数向量,并根据与其对应的目标将其分成左耳相关系数向量和右耳相关系数向量;将每次使用者所选择的目标作为标签,和对应的相关系数向量ρtotal一起送入线性判别分析LDA模型中进行训练,得到线性判别模型;
步骤5,在线判别:继续实施步骤3,将步骤3中得到的相关系数向量ρtotal送入步骤4得到的线性判别模型中进行分类,得到使用者听辨的目标;
步骤6,计算机通过耳机播放音频“左耳”或者“右耳”,同时通过屏幕显示“左耳”或者“右耳”,指示出使用者所听辨的目标,实现对使用者的听觉反馈和视觉反馈
步骤7,计算机完成目标识别后,返回步骤5,重复步骤5与步骤6,进行下一次目标识别任务。
2.根据权利要求1所述的基于多频率时序编码的稳态听觉诱发电位脑-机接口方法,其特征在于,所述的步骤4中训练方法为:将每次使用者所选择的目标作为标签,和对应的相关系数向量ρtotal一起送入线性判别分析LDA模型中进行训练,找到一个最佳的投影方向w,使得将相关系数向量投影到一条直线上之后,两类向量各自的类内方差最小,两类向量均值之间的欧氏距离最大,保存这一投影方向w以及两类向量投影后的均值μL、μR,得到线性判别模型。
3.根据权利要求1所述的基于多频率时序编码的稳态听觉诱发电位脑-机接口方法,其T
特征在于,所述的步骤5的具体方法为:利用步骤4中得到的投影方向w,通过计算w 与ρtotal的内积,得到投影后的数值s,比较s与两类向量投影后的均值μL、μR的距离,将其距离最近的一类向量所属的音频刺激单元判定为使用者听辨的目标。

说明书全文

基于多频率时序编码的稳态听觉诱发电位脑-机接口方法

技术领域

[0001] 本发明涉及生物医学工程中神经工程及脑-机接口技术领域,具体涉及基于多频率时序编码的稳态听觉诱发电位脑-机接口方法。

背景技术

[0002] 脑-机接口是人脑-计算机接口的简称,稳态听觉诱发电位信号作为一种重要的信息载体,具有所有使用者无需训练均可诱发响应、不依赖于使用者进行视觉注视的特点,因而在脑-机接口应用中具有非常重要的价值。但稳态听觉诱发电位的诱发强度相对较低,传统的脑-机接口范式所采用的利用单一频率对信号进行编码的方式,其编码的特异性不强,不能充分表征稳态听觉诱发电位中的信息。这导致当前基于稳态听觉诱发电位的脑-机接口正确率较低,限制了其进一步的发展与应用。
[0003] 相关研究表明,通过引入多个频率对同一目标进行编码,可以提高信号编码的特异性,进而增强从微弱信号中提取信息的能。在基于稳态听觉诱发电位的脑-机接口中,采用多频率编码方法可以提高编码特异性,从而提高其性能,为当前脑-机接口技术提供了创新发展的思路,目前还没有相关的文献公开。

发明内容

[0004] 为了克服上述现有技术的缺点,本发明的目的在于提供基于多频率时序编码的稳态听觉诱发电位脑-机接口方法,提高稳态听觉诱发电位信号编码的特异性,进而提升基于稳态听觉诱发电位的脑-机接口的性能。
[0005] 为了达到上述目的,本发明采取的技术方案为:
[0006] 基于多频率时序编码的稳态听觉诱发电位脑-机接口方法,包括以下步骤:
[0007] 步骤1,在使用者头部听觉颞区安放测量电极,在其单侧位置处安放参考电极,在其头部前额处安放地电极,电极测得的脑电信号经放大和模数转换后送往计算机;
[0008] 步骤2,形成左右耳的音频刺激单元:左耳和右耳的音频刺激单元分别采用不同频率的纯音作为载波,每个音频刺激单元被从时间上划分成n段,n为大于1的整数,对每段音频刺激单元分别选取不同调制频率进行幅值调制,每段选取的调制频率不重复,从而形成n的阶乘即n!种调制方案,并从中选择一种调制方案制作音频刺激单元,将左右耳音频刺激单元分别同时呈现在使用者的左耳和右耳内,耳机音量被调节到舒适的平;
[0009] 步骤3,使用者集中听觉注意力于左右耳两个音频刺激单元中的任意一个,使用者注意听辨的音频刺激单元称为目标,而另一侧的音频刺激单元称为非目标;
[0010] 计算机同步采集刺激开始与结束标志位,并通过测试电极采集脑电信号,使用典型相关分析(CCA)算法计算出脑电信号与调制频率的相关系数,具体包含以下操作:
[0011] 首先,对脑电信号作滤波和陷波处理;其次,获得脑电数据中依照刺激起始标志位和结束标志位进行截断的数据段;最后,将数据段送入典型相关分析(CCA)算法中,将脑电数据分别与利用左、右耳调制频率制作的模板进行比较,得到脑电数据与左耳每段调制频率的相关系数ρ1,ρ3,…,ρ2n-1,及脑电数据与右耳每段调制频率的相关系数ρ2,ρ4,…,ρ2n,其中n为大于1的整数,表示刺激频率的个数;将2n个相关系数按下标顺序组成相关系数向量ρtotal=[ρ1,ρ2,ρ3,ρ4,…,ρ2n]T;
[0012] 步骤4,离线分析:重复步骤3若干次,得到一组相关系数向量,并根据与其对应的目标将其分成左耳相关系数向量和右耳相关系数向量;将每次使用者所选择的目标作为标签,和对应的相关系数向量ρtotal一起送入线性判别分析(LDA)模型中进行训练,得到线性判别模型;
[0013] 步骤5,在线判别:继续实施步骤3,将步骤3中得到的相关系数向量ρtotal送入步骤4得到的线性判别模型中进行分类,得到使用者听辨的目标;
[0014] 步骤6,计算机通过耳机播放音频“左耳”或者“右耳”,同时通过屏幕显示“左耳”或者“右耳”,指示出使用者所听辨的目标,实现对使用者的听觉反馈和视觉反馈
[0015] 步骤7,计算机完成目标识别后,返回步骤5,重复步骤5与步骤6,进行下一次目标识别任务。
[0016] 所述的步骤4中训练方法为:将每次使用者所选择的目标作为标签,和对应的相关系数向量ρtotal一起送入线性判别分析(LDA)模型中进行训练,找到一个最佳的投影方向w,使得将相关系数向量投影到一条直线上之后,两类向量各自的类内方差最小,两类向量均值之间的欧氏距离最大,保存这一投影方向w以及两类向量投影后的均值μL、μR,得到线性判别模型。
[0017] 所述的步骤5的具体方法为:利用步骤4中得到的投影方向w,通过计算wT与ρtotal的内积,得到投影后的数值s,比较s与两类向量投影后的均值μL、μR的距离,将其距离最近的一类向量所属的音频刺激单元判定为使用者听辨的目标。
[0018] 本发明的有益效果为:
[0019] 本发明针对稳态听觉诱发电位信号微弱、辨识困难,造成基于稳态听觉诱发电位的脑-机接口识别正确率低的问题,提出了基于多频率时序编码的稳态听觉诱发电位脑-机接口方法。基于稳态听觉诱发电位的脑-机接口具有不需要训练、不依赖于视觉注视的优点,是脑-机接口的一种重要形式。但稳态听觉诱发电位相对微弱,基于单一频率编码的范式辨识目标困难,正确率低。本发明是多频率编码技术在脑-机接口中的创新应用,通过采取多种编码频率时序组合编码同一目标的方法,实现了稳态听觉诱发电位编码特异性的有效增强,提高了听觉目标的可辨识性,为实现高性能脑-机接口技术的实用化开辟了新的思路,显示了如下优点:
[0020] (1)相比于传统的脑-机交互方式,本发明首次将多频率编码方式引入基于稳态听觉诱发电位的脑-机接口应用实施中,增强了编码的特异性,提升了脑-机接口的性能;
[0021] (2)通过典型相关分析(CCA)算法提取特征和线性判别模型(LDA)进行分类,提高了分类的精度附图说明
[0022] 图1为本发明脑电电极位置及方法流程图
[0023] 图2为本发明实施例音频刺激单元范式图。
[0024] 图3为本发明实施例多频率时序编码的脑-机接口范式图。
[0025] 图4为本发明典型相关分析(CCA)算法的流程图。
[0026] 图5为本发明实施例脑-机接口在线性能图,纵坐标代表平均正确率,横坐标为该正确率下不同次实验,图5(a)为使用者S1操作脑-机接口时的在线性能图;图5(b)为使用者S2操作脑-机接口时的在线性能图;图5(c)为使用者S3操作脑-机接口时的在线性能图;图5(d)为使用者S4操作脑-机接口时的在线性能图。
[0027] 图6为本发明实施例左右耳正确率差值图,图6(a)为使用者前、后两段单一频率编码时和整体多频率编码方法的正确率对比图;图6(b)为使用者在前、后两段单一频率编码和整体多频率编码方法下,左耳正确率和右耳正确率的差值图。

具体实施方式

[0028] 下面结合附图对本发明作进一步的详细说明。
[0029] 参照图1,基于多频率编码听觉感知的稳态诱发电位脑-机接口方法,包含以下步骤:
[0030] 步骤1,在使用者头部听觉颞区T7、T8、P7、P8、TP7、TP8位置安放测量电极,在其单侧耳垂位置A1或A2处安放参考电极,在其头部前额处Fpz位置安放地电极,电极测得的脑电信号经放大和模数转换后送往计算机;
[0031] 步骤2,参照图2和图3,形成左右耳的音频刺激单元:左耳和右耳的音频刺激单元分别采用不同频率的纯音作为载波以增加彼此之间的区分度,每个音频刺激单元被从时间上划分成n段,n为大于1的整数,对每段音频刺激单元分别选取不同调制频率进行幅值调制,每段选取的调制频率不重复,从而形成n的阶乘(即n!)种调制方案,并从中选择一种调制方案制作音频刺激单元,将左右耳音频刺激单元分别同时呈现在使用者的左耳和右耳内,耳机音量被调节到舒适的水平;
[0032] 步骤3,使用者集中听觉注意力于左右耳两个音频刺激单元中的任意一个,使用者注意听辨的音频刺激单元称为目标,而另一侧的音频刺激单元称为非目标;
[0033] 参照图4,计算机同步采集刺激开始与结束标志位,并通过测试电极采集脑电信号,使用典型相关分析(CCA)算法计算出脑电信号与调制频率的相关系数,具体包含以下操作:首先,对脑电信号作带通滤波处理,消除基线漂移及其他噪声干扰,并对脑电信号作48~52Hz陷波处理,消除50Hz市电干扰;其次,获得脑电数据中依照刺激起始标志位和结束标志位进行截断的数据段;最后,将数据段送入典型相关分析(CCA)算法中,将脑电数据分别与利用左、右耳调制频率制作的模板进行比较,得到脑电数据与左耳每段调制频率的相关系数ρ1,ρ3,…,ρ2n-1,及脑电数据与右耳每段调制频率的相关系数ρ2,ρ4,…,ρ2n,其中n为大于1的整数,表示刺激频率的个数;将2n个相关系数按下标顺序组成相关系数向量ρtotal=T[ρ1,ρ2,ρ3,ρ4,…,ρ2n];
[0034] 步骤4,离线分析:重复步骤3若干次,结合每一次使用者选择的具体目标,得到一组相关系数向量,并根据与其对应的目标将其分成左耳相关系数向量和右耳相关系数向量这两类向量;将每次使用者所选择的目标作为标签,和对应的相关系数向量ρtotal一起送入线性判别分析(LDA)模型中进行训练,找到一个最佳的投影方向w,使得将相关系数向量投影到一条直线上之后,两类向量各自的类内方差最小,两类向量均值之间的欧氏距离最大,保存这一投影方向w以及两类向量投影后的均值μL、μR,得到线性判别模型;
[0035] 步骤5,在线判别:继续实施步骤3,将步骤3中得到的相关系数向量ρtotal送入步骤4得到的线性判别模型中进行分类,利用步骤4中得到的投影方向w,通过计算wT与ρtotal的内积,得到投影后的数值s,比较s与两类向量投影后的均值μL、μR的距离,将其距离最近的一类向量所属的音频刺激单元判定为使用者听辨的目标;
[0036] 步骤6,计算机通过耳机播放音频“左耳”或者“右耳”,同时通过屏幕显示“左耳”或者“右耳”,指示出使用者所听辨的目标,实现对使用者的听觉反馈和视觉反馈;
[0037] 步骤7,计算机完成目标识别后,返回步骤5,重复步骤5-步骤6,进行下一次目标识别任务。
[0038] 下面再结合实施例对本发明进行说明。
[0039] 采用本发明方法对四名使用者(S1~S4)进行了实验,实验过程中同步记录并实时显示脑电信号,以便在实验中检查使用者状态,防止使用者产生眨眼、体动等动作,保证脑电信号的数据质量。按照上述步骤1对使用者安放电极,按照上述步骤2形成左耳与右耳的音频刺激单元,其中n=2,单次实验时长持续6秒,左耳音频刺激单元的载波频率为2.6kHz,左耳前、后两段音频刺激的调制频率分别为4Hz和13Hz;右耳音频刺激单元的载波频率为540Hz,右耳前、后两段音频刺激的调制频率分别为5Hz和9Hz;实验中将耳机音量调节至舒适水平;按照上述步骤3至步骤4训练线性判别模型(LDA),每名使用者对每个音频刺激单元均进行10组实验,每组包含5次实验,两次实验之间的时间间隔为2秒;按照上述步骤5进行在线分析实验,对每个使用者左右耳两个音频刺激单元各进行4组共20次实验,两次实验之间的时间间隔为2秒,使用者各次实验的正确率参照图5,图5(a)为使用者S1操作脑-机接口时的在线性能图;图5(b)为使用者S2操作脑-机接口时的在线性能图;图5(c)为使用者S3操作脑-机接口时的在线性能图;图5(d)为使用者S4操作脑-机接口时的在线性能图,从图5可以看出,使用者的平均正确率都达到了70%以上,证明基于多频率时序编码的稳态听觉诱发电位脑-机接口方法具有一定的实用性。使用者前三秒正确率、后三秒正确率和整体六秒正确率参照图6,图6(a)为使用者前三秒正确率、后三秒正确率和整体六秒正确率的对比图,图6(b)为使用者前后三秒内,左耳正确率和右耳正确率的差值,从图6可以看出,和单一频率编码方法相比,基于多频率时序编码的稳态听觉诱发电位脑-机接口方法在有效提高正确率的同时,并未放大双耳正确率的差值,这表明基于多频率时序编码的稳态听觉诱发电位脑-机接口性能的增强是基于多频率时序编码的方法而非增加时间的方式实现的。
高效检索全球专利

专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。

申请试用

分析报告

专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。

申请试用

QQ群二维码
意见反馈