首页 / 专利库 / 假肢 / 助听器 / 人工耳蜗植入 / 人工耳蜗声调语言的时域精细结构新型编码的验证方法

人工蜗声调语言的时域精细结构新型编码的验证方法

阅读:33发布:2020-08-10

专利汇可以提供人工蜗声调语言的时域精细结构新型编码的验证方法专利检索,专利查询,专利分析的服务。并且本 发明 公开了人工 耳 蜗声调语言的时域精细结构新型编码的验证方法,主要包括以下步骤:1)选取实验 生物 体。2)建立原始语音诱发下丘神经响应 时空 定量化模式I。3)建立新型编码声调语音刺激诱发下丘神经响应的时空模式II。4)建立新型编码语音 电刺激 诱发下丘神经响应时空模式III。5)通过调整语音编码对应的电刺激模式参数,使新型编码语音电刺激诱发下丘神经响应时空模式III逼近原始语音诱发下丘神经响应时空定量化模式I。本发明可以更真实、更客观准确地反映生物体听觉通路对某种声音编码策略的接受程度,可以作为人工耳蜗新型语音编码的辅助评估方法。,下面是人工蜗声调语言的时域精细结构新型编码的验证方法专利的具体信息内容。

1.人工蜗声调语言的时域精细结构新型编码的验证方法,其特征在于,主要包括以下步骤:
1)建立所述原始语音诱发下丘神经响应时空定量化模式I;主要步骤如下:
1.1)选取适合听觉神经通路研究的实验生物体模型;
1.1)使用CLICK声音信号对实验生物体的单耳进行听曲线测试;测试主要包括听阈测试和听域测试;
1.3)对所述实验生物体施行开颅手术,暴露出实验耳对侧的下丘;将多通道记录电极植入所述实验生物体实验耳对侧的下丘;
1.4)在实验生物体实验耳的一侧播放纯音声音信号,对多通道记录电极记录到的神经元进行扫频处理,测量并控制该组神经元的特征频率,使所述特征频率分布在8kHz以下;
1.5)确定声调语音刺激信号。
1.6)语音刺激时,改变声调语音信号的参数,观察原始语音诱发下丘神经响应I的时间-空间分布规律;主要步骤如下:
1.6.1)多通道记录下所述记录电极在所述原始语音刺激诱发实验生物体下丘的神经响应时空分布模式I;
确定原始语音刺激输入和下丘神经响应的时空分布模式I的基本元素库;根据所述基本元素库,建立语音刺激基本元素-下丘时空响应的基本成分函数表达模式;
建立原始声调语音刺激和声刺激基本元素的解析关系:
Xspeical_o=fx_o*Xo;                (1)
Xo是原始语音刺激输入的基本元素矩阵,主要反映声音参数;其中,x01反应声音频率,x02反应声音强度,x03反应声音的声调信息;Xspecial_o是特定的声调语音刺激。fx_o是一个特定的矩阵系数,反映了特定的原始语音刺激和语音刺激基本元素矩阵的传递函数;
1.6.2)建立原始声调语音刺激诱发的下丘神经响应I,即所述原始声调语音刺激和诱发下丘神经响应的神经响应时空分布模式I:
Yspecial_o=fy_o*Yo;                (2)
Yo是原始语音诱发的神经响应的基本元素矩阵;Yspecial_o是原始声调语音刺激诱发的下丘神经响应的综合反应;fy_o是一个特定的矩阵系数,用于确定特定的下丘神经响应,反映了下丘神经响应的综合反应和下丘神经响应的基本成分之间的函数关系;
1.6.3)联立公式1和公式2,建立特定原始语音刺激输入和下丘神经诱发响应之间的模式:
Yspecial_o=Fo*Xspecial_o;              (3)
Xspecial_o是特定的原始语音刺激,主要参数包括频率、强度和声调信息;Yspecial_o是特定原始语音诱发的特定的神经响应;Yspecial_o的主要参数包括发放时间间隔、发放速率、发放的空间分布;Fo是特定原始语音刺激输入和下丘神经诱发响应之间的复杂函数关系模式,反映了生物体听觉神经通路的响应属性;
联立公式1至公式3,从而得到特定原始语音刺激输入和下丘神经诱发响应之间的复杂函数关系模式Fo的表达式:
Fo=fy_o*Yo/fx_o*Xo;               (4)
式中,Yo是原始语音诱发的神经响应的基本元素矩阵;fy_o是一个特定的矩阵系数,用于确定特定的下丘神经响应,反映了下丘神经响应的综合反应和下丘神经响应的基本成分之间的函数关系;fx_o是一个特定的矩阵系数,反映了特定的原始语音刺激和语音刺激基本元素矩阵的传递函数;
2)建立新型编码声调语音刺激诱发的下丘特定神经响应时空分布模式IIYspecial_e;
Yspecial_e=Fe*Xspecial_e;              (5)
Yspecial_e是新型编码声调语音刺激诱发的下丘神经响应的综合反应;Fe是新型编码声调语音刺激诱发下丘神经响应的传递函数;Xspecial_e是新型编码的原始声调语音刺激;
建立新型编码声调语音刺激诱发下丘神经响应的时空模式IIYspecial_e主要步骤如下:
2.1)确定需要验证的人工耳蜗声调语言的时域精细结构新型编码策略T;
2.2)将需要验证的人工耳蜗声调语言的时域精细结构新型编码策略T载入语音处理模中,主要步骤如下:
2.2.1)对语音信号进行预处理;
2.2.2)将语音信号频率划分为8个频段;每个所述频段对应一个语音信号通道;
2.2.3)利用软件或程序提取每个通道语音信号的基频,选取8个所述语音信号通道内幅值最大的谐波分量;
2.2.4)利用软件或程序移频处理,即将原始语音信号的频率移动到基频范围,实现信号的降频;
2.3)利用新型编码语音诱发下丘神经响应时空分布IIYspecial_e,的模型建立并分析新型编码语音刺激诱发出的神经响应时空定量化模式II;
3)根据新型语音编码策略T建立对应的新型编码电刺激模式Xspecial_ele,建立Xspecial_ele诱发的生物体下丘神经响应时空模式IIIYspecial_ele,并且可以通过调整新型编码电刺激模式的参数,使其诱发的下丘神经响应时空模式IIIYspecial_ele能向原始语音刺激诱发下丘神经响应时空模式IYspecial_o的方向逼近。主要步骤如下:
3.1)声调语音信号经过时域精细结构新型编码T转换为电流刺激信号;所述电流刺激信号序列分别释放到多通道耳蜗电刺激电极上;
在电刺激器中,利用刺激电路电压刺激转换为电流刺激。
3.2)将多通道耳蜗刺激微电极置于所述实验生物体耳蜗内,主要步骤如下:
3.2.1)在手术显微镜下,听泡破壁并暴露耳蜗的圆窗和底回;
3.2.2)用钻头在耳蜗底回上打洞,将电极经该小洞塞入耳蜗的鼓阶中,使耳蜗微电极触点接近螺旋神经节细胞。
3.2.3)将电流刺激输入到刺激电极中;电流刺激经植入的刺激电极释放刺激到耳蜗;
3.3)多通道记录刺激电极在下丘区域的响应输出,即电刺激诱发下丘神经响应IIIYspecial_ele;
3.4)电刺激时,改变电刺激的参数和电刺激位置,观察下丘诱发出的神经响应IIIYspecial_ele的时间-空间分布的变化规律;
3.5)利用新型编码语音转换的电刺激诱发的下丘神经响应IIIYspecial_ele的模型,分析不同刺激模式下对下丘神经响应IIIYspecial_ele时间-空间分布的阈值和激活有效区域的规律,即分析单极刺激、双极刺激和三极刺激模式对下丘神经响应IIIYspecial_ele的影响;
3.6)建立下丘神经响应IIIYspecial_ele的数学仿真模型。
分析线阵电极中八电极上电场变化;所述线阵电极为直线排列的八个电极;所述八个电极等间距分布;
3.6.1)分析耳蜗听神经仿真模型中螺旋神经节细胞的电场梯度分布规律;
3.6.2)采用傅里叶-有限元法分析一个周期内耳蜗组织中电场的变化规律。
3.6.3)建立新型编码语音电刺激诱发下丘神经响应时空分布模式IIIYspecial_ele模型;
3.7)判断需要验证的人工耳蜗声调语言的时域精细结构新型编码策略T的有效性;
通过调整语音编码对应的电刺激模式参数,使新型编码语音电刺激诱发下丘神经响应时空模式IIIYspecial_ele逼近原始语音诱发下丘神经响应时空定量化模式I;新型编码T语音电刺激诱发下丘神经响应模式IIIYspecial_ele和原始语音刺激诱发下丘神经响应模式IYspecial_o的相似度和需要验证的人工耳蜗声调语言的时域精细结构新型编码有效性成正比。
2.根据权利要求1所述的人工耳蜗声调语言的时域精细结构新型编码的验证方法,其特征在于:声音刺激器主要输出纯音、白噪声和声调语音刺激。
3.根据权利要求1或2所述的人工耳蜗声调语言的时域精细结构新型编码的验证方法,其特征在于:所述电刺激器选择有线电刺激器或无线电刺激器;
在使用编码语音转换的神经电刺激器时,主要调整三个参数;所述三个参数分别为刺激脉冲频率、刺激脉宽和刺激电流强度;
所述刺激脉冲频率主要包括30Hz、200Hz、400Hz、1000Hz、1200Hz或2000Hz;所述刺激脉宽主要包括25μs、50μs或100μs;所述刺激电流强度范围为50-4000μA。
4.根据权利要求1或2所述的人工耳蜗声调语言的时域精细结构新型编码的验证方法,其特征在于:将声调语音信号转换为语音刺激的方法主要是:利用LabView软件对采集到的声调语音信号进行编辑;利用16位D/A转换器将编辑后的声调语音信号转换为语音刺激。
5.根据权利要求1或4所述的人工耳蜗声调语言的时域精细结构新型编码的验证方法,其特征在于:建立新型编码语音诱发下丘神经响应时空分布模式III的模型的物理电场分布采用COMSOLMultiphysics软件的AC/DC模块来进行仿真;建立新型编码语音诱发下丘神经响应时空分布模式III的模型的神经响应分布采用Neuron软件来仿真。
6.根据权利要求1或2所述的人工耳蜗声调语言的时域精细结构新型编码的验证方法,其特征在于:所述语音信号处理模块为计算机或数字处理器。
7.根据权利要求1或3所述的人工耳蜗声调语言的时域精细结构新型编码的验证方法,其特征在于:验证多通道记录电极阵列准确插入实验耳对侧下丘的方法为:在实验生物体实验耳的一侧播放白噪声声音信号,当多通道记录电极阵列记录到的响应节拍和声音刺激器给予的白噪声的响应节拍一致,则多通道记录电极阵列准确插入实验耳对侧的下丘。
8.根据权利要求1或2所述的人工耳蜗声调语言的时域精细结构新型编码的验证方法,其特征在于:确定声调语音刺激信号的主要步骤如下:
1)利用labview软件构建声音刺激器;
2)所述声调语音信号输入到声音刺激器中;所述声调语音信号来源于中国标准汉语普通话语音库;
3)所述声音刺激器对输入的标准汉语普通话语音元素组进行编辑,主要包括对声调语音信号元素的持续时间、语音强度和重复播放的次数进行设置;其中,一组声调语音信号包括20个标准汉语普通话语音元素,20个元素之间的顺序采用随机设置;这组声调语音信号播放10次;
4)声调语音刺激组的参数设置好后,利用16位D/A转换器将编辑后的文本信号转换为电压形式的声调语音信号,在自由音场条件下该电压形式的声调语音信号驱动扬声器输出声调语音刺激。
9.根据权利要求1或2所述的人工耳蜗声调语言的时域精细结构新型编码的验证方法,其特征在于:所述需要验证的人工耳蜗声调语言的时域精细结构新型编码策略T为HSSE编码策略。
10.根据权利要求1或2所述的人工耳蜗声调语言的时域精细结构新型编码的验证方法,其特征在于:所述对语音信号进行的预处理主要包括预加重、数据分加窗处理;预加重采用一阶巴特沃斯高通滤波器;数据分帧在matlab软件中进行;加窗处理采用Hanning窗。

说明书全文

人工蜗声调语言的时域精细结构新型编码的验证方法

技术领域

[0001] 本发明涉及人工耳蜗(CI)系统技术领域,具体是人工耳蜗的声调语言时域精细结构新型编码的验证方法。

背景技术

[0002] 目前大多数CI使用者在标准听测试和安静环境下日常言语识别接近正常听力者的听觉性能,但是他们的听觉能力与正常听力者相比依然存在鸿沟。例如CI植入者在噪声环境下的语音感知能力较差:他们在稳态噪声背景下有接近15dB的听力损失,他们在竞争语音环境中有近30dB的听力损失。植入者对音乐的感知也同样有限:如果说对节奏的识别还差强人意,那么对旋律和音色的感知只能说微乎其微。而且声调语言植入者在嘈杂环境下更容易出现能量掩蔽和信息掩蔽,对声调模式的感知和发声能力和正常听力者相去甚远。
[0003] 因此,研究者引入各种创新的语音编码策略和研究方法来提高CI的听力修复平,而所有这些方法在临床试验之前都必须经过严格的评估。目前有专针对CI植入者的评估方法,通过对言语基频、低中频、高频的感知及言语可懂度进行定量分析,该评估结果对于优化言语编码策略具有重要意义,不过主要适合于发展相对成熟的语音编码策略。新型的编码策略可通过声学信息分析,最后再利用正常听力者的主观音质评价来进行评估。新型语音编码策略的CI植入者心理物理学评估方法在临床试验阶段的实施非常耗时,而且其信号处理还需评估大量参数,包括刺激电极植入在人体被试的准确位置、电极和激活神经组织的距离、电极配置的差异等。同时,CI植入者的对照研究数量十分有限,新型语音编码策略多不成熟,有待多重检验评估,其检验方法必然受到伦理条例限制。
[0004] 目前新型编码策略的评估方法受缺乏电极-神经接口的限制,始终无法全部满足新编码策略新方法的验证需求,迫切需求深入的研究。
[0005] 上述原因导致主流的CI植入者测试方法不适用于CI新编码新方法研究的评估,研究者转而寻找CI植入者听力评估研究的补充手段。有研究者发现用2-9通道CI信号处理软件模拟处理语音测试材料,无论是采用正弦波还是噪音作为载波调制后播放出来,听力正常的被试均未观察到显著的统计学差异。因此,研究者都参照该方法开展基于声学仿真(AcousticSimulation)方法研究语音的可懂性,采用模拟CI编码分析多种复杂掩蔽条件对语音感知的效应。CI声学仿真利用语音编码机,采用声码合成技术(SoundVocoder)方式,联合听力正常被试的心理物理学验证方法。CI声学仿真能帮助确认CI性能相关的关键参数。该音质评价方法利用了正常人的正常听力,又避免了伦理限制,为听觉信息编码提供了很好的判断验证工具。然而,该方法最大的缺陷是缺乏电极-听觉神经通路接口的信息。
[0006] 此外,基于听觉神经网络神经计算方法具有快速、可重复性、定量的优势,能提供各种类型 的客观 评估。例如 ,语 音-回声 调制能量比 (S peec h-to -ReverberationModulationEnergyRatio,SRMR)可测量CI语音的性能和可懂性,不过同样缺乏电刺激听神经纤维的生理响应。后又发展出利用测量神经图相似指数评估受损的听神经模型响应,结合听神经(AcousticNerve,AN)模型来评估CI的语音可懂性,还能定量地评估CI的新型编码策略中各项变量对CI使用者语音识别能力的影响。鉴于仿真研究是针对特定研究目标条件下对真实系统的简化,所以只能对实际系统实验具有重要的参考意义,始终缺失真实有效的评估价值。
[0007] 因此,听力修复评估研究仍然极为迫切地需求客观的、定量的、适用于初级研究阶段的语音编码新策略新方法,并且能反映听觉神经系统的响应。

发明内容

[0008] 本发明的目的是解决现有技术中的问题。
[0009] 人工耳蜗声调语言的时域精细结构新型编码的验证方法,主要包括以下步骤:
[0010] 1)建立原始语音诱发下丘神经响应时空定量化模式I。主要步骤如下:
[0011] 1.1)选取适合听觉神经通路研究的实验生物体模型。
[0012] 1.2)使用CLICK声音信号对实验生物体的单耳进行听力曲线测试。测试主要包括听阈测试和听域测试。
[0013] 1.3)对所述实验生物体施行开颅手术,暴露出实验耳对侧的下丘。将多通道记录电极植入所述实验生物体实验耳对侧的下丘。验证多通道记录电极阵列准确插入实验耳对侧下丘的方法为:在实验生物体实验耳的一侧播放白噪声声音信号,当多通道记录电极阵列记录到的响应节拍和声音刺激器给予的白噪声的响应节拍一致,则多通道记录电极阵列准确插入实验耳对侧的下丘。
[0014] 1.4)在实验生物体实验耳的一侧播放纯音声音信号,对多通道记录电极记录到的神经元进行扫频处理,测量并控制该组神经元的特征频率,使所述特征频率分布在8kHz以下。
[0015] 1.5)确定声调语音刺激信号。确定声调语音刺激信号的主要步骤如下:
[0016] I)利用labview软件构建声音刺激器。声音刺激器主要输出纯音、白噪声和声调语音刺激。
[0017] II)所述声调语音信号输入到声音刺激器中。所述声调语音信号来源于中国标准汉语普通话语音库。
[0018] III)所述声音刺激器对输入的标准汉语普通话语音元素组进行编辑,主要包括对声调语音信号元素的持续时间、语音强度和重复播放的次数进行设置。其中,一组声调语音信号包括20个标准汉语普通话语音元素,20个元素之间的顺序采用随机设置。这组声调语音信号播放10次。
[0019] III)声调语音刺激组的参数设置好后,利用16位D/A转换器将编辑后的文本信号转换为电压形式的声调语音信号,在自由音场条件下该电压形式的声调语音信号驱动扬声器输出声调语音刺激。
[0020] 将声调语音信号转换为语音刺激的方法主要是:利用LabView软件对采集到的声调语音信号进行编辑。利用16位D/A转换器将编辑后的声调语音信号转换为语音刺激。
[0021] 1.6)语音刺激时,改变声调语音信号的参数,观察原始语音诱发下丘神经响应I的时间-空间分布规律。主要步骤如下:
[0022] 1.6.1)多通道记录下所述记录电极在所述原始语音刺激诱发实验生物体下丘的神经响应时空分布模式I。
[0023] 确定原始语音刺激输入和下丘神经响应的时空分布模式I的基本元素库。根据所述基本元素库,建立语音刺激基本元素-下丘时空响应的基本成分函数表达模式。
[0024] 建立原始声调语音刺激和声刺激基本元素的解析关系:
[0025] Xspeical_o=fx_o*Xo。  (1)
[0026] Xo是原始语音刺激输入的基本元素矩阵,主要反映声音参数。其中,x01反应声音频率,x02反应声音强度,x03反应声音的声调信息。Xspecial_o是特定的声调语音刺激。fx_o是一个特定的矩阵系数,反映了特定的原始语音刺激和语音刺激基本元素矩阵的传递函数。
[0027] 1.6.2)建立原始声调语音刺激诱发的下丘神经响应I,即所述原始声调语音刺激和诱发下丘神经响应的神经响应时空分布模式I:
[0028] Yspecial_o=fy_o*Yo。  (2)
[0029] Yo是原始语音诱发的神经响应的基本元素矩阵。Yspecial_o是原始声调语音刺激诱发的下丘神经响应的综合反应。fy_o是一个特定的矩阵系数,用于确定特定的下丘神经响应,反映了下丘神经响应的综合反应和下丘神经响应的基本成分之间的函数关系。
[0030] 1.6.3)联立公式1和公式2,建立特定原始语音刺激输入和下丘神经诱发响应之间的模式:
[0031] Yspecial_o=Fo*Xspecial_o。  (3)
[0032] Xspecial_o是特定的原始语音刺激,主要参数包括频率、强度和声调信息。Yspecial_o是特定原始语音诱发的特定的神经响应。Yspecial_o的主要参数包括发放时间间隔、发放速率、发放的空间分布。Fo是特定原始语音刺激输入和下丘神经诱发响应之间的复杂函数关系模式,反映了生物体听觉神经通路的响应属性。
[0033] 联立公式1至公式3,从而得到特定原始语音刺激输入和下丘神经诱发响应之间的复杂函数关系模式Fo的表达式:
[0034] Fo=fy_o*Yo/fx_o*Xo。  (4)
[0035] 式中,Yo是原始语音诱发的神经响应的基本元素矩阵。fy_o是一个特定的矩阵系数,用于确定特定的下丘神经响应,反映了下丘神经响应的综合反应和下丘神经响应的基本成分之间的函数关系。fx_o是一个特定的矩阵系数,反映了特定的原始语音刺激和语音刺激基本元素矩阵的传递函数。
[0036] 2)建立新型编码声调语音刺激诱发的下丘特定神经响应时空分布模式IIYspecial_e。
[0037] Yspecial_e=Fe*Xspecial_e。  (5)
[0038] Yspecial_e是新型编码声调语音刺激诱发的下丘神经响应的综合反应。Fe是新型编码声调语音刺激诱发下丘神经响应的传递函数。Xspecial_e是新型编码的原始声调语音刺激。
[0039] 建立新型编码声调语音刺激诱发下丘神经响应的时空模式IIYspecial_e主要步骤如下:
[0040] 2.1)确定需要验证的人工耳蜗声调语言的时域精细结构新型编码策略T。
[0041] 所述需要验证的人工耳蜗声调语言的时域精细结构新型编码策略T为HSSE编码策略。
[0042] 2.2)将需要验证的人工耳蜗声调语言的时域精细结构新型编码策略T载入语音处理模中,所述语音信号处理模块为计算机或数字处理器,主要步骤如下:
[0043] 2.2.1)对语音信号进行预处理。
[0044] 所述对语音信号进行的预处理主要包括预加重、数据分加窗处理。预加重采用一阶巴特沃斯高通滤波器。数据分帧在matlab软件中进行。加窗处理采用Hanning窗。
[0045] 2.2.2)将语音信号频率划分为8个频段。每个所述频段对应一个语音信号通道。
[0046] 2.2.3)利用软件或程序提取每个通道语音信号的基频,选取8个所述语音信号通道内幅值最大的谐波分量。
[0047] 2.2.4)利用软件或程序移频处理,即将原始语音信号的频率移动到基频范围,实现信号的降频。
[0048] 2.3)利用新型编码语音诱发下丘神经响应时空分布IIYspecial_e的模型建立并分析新型编码语音刺激诱发出的神经响应时空定量化模式II。
[0049] 3)根据新型语音编码策略T建立对应的新型编码电刺激模式Xspecial_ele,建立Xspecial_ele诱发的生物体下丘神经响应时空模式IIIYspecial_ele,并且可以通过调整新型编码电刺激模式的参数,使其诱发的下丘神经响应时空模式IIIYspecial_ele能向原始语音刺激诱发下丘神经响应时空模式IYspecial_o的方向逼近。主要步骤如下:
[0050] 3.1)声调语音信号经过时域精细结构新型编码T转换为电流刺激信号。所述电流刺激信号序列分别释放到多通道耳蜗电刺激电极上。
[0051] 在电刺激器中,利用刺激电路将电压刺激转换为电流刺激。
[0052] 所述电刺激器选择有线电刺激器或无线电刺激器。
[0053] 在使用编码语音转换的神经电刺激器时,主要调整三个参数。所述三个参数分别为刺激脉冲频率、刺激脉宽和刺激电流强度。
[0054] 所述刺激脉冲频率主要包括30Hz、200Hz、400Hz、1000Hz、1200Hz或2000Hz。所述刺激脉宽主要包括25μs、50μs或100μs。所述刺激电流强度范围为50-4000μA。
[0055] 3.2)将多通道耳蜗刺激微电极置于所述实验生物体耳蜗内,主要步骤如下:
[0056] 3.2.1)在手术显微镜下,听泡破壁并暴露耳蜗的圆窗和底回。
[0057] 3.2.2)用钻头在耳蜗底回上打洞,将电极经该小洞塞入耳蜗的鼓阶中,使耳蜗微电极触点接近螺旋神经节细胞。
[0058] 3.2.3)将电流刺激输入到刺激电极中。电流刺激经植入的刺激电极释放刺激到耳蜗。
[0059] 3.3)多通道记录刺激电极在下丘区域的响应输出,即电刺激诱发下丘神经响应IIIYspecial_ele。
[0060] 3.4)电刺激时,改变电刺激的参数和电刺激位置,观察下丘诱发出的神经响应IIIYspecial_ele的时间-空间分布的变化规律。
[0061] 3.5)利用新型编码语音转换的电刺激诱发的下丘神经响应IIIYspecial_ele的模型,分析不同刺激模式下对下丘神经响应IIIYspecial_ele时间-空间分布的阈值和激活有效区域的规律,即分析单极刺激、双极刺激和三极刺激模式对下丘神经响应IIIYspecial_ele的影响。
[0062] 3.6)建立下丘神经响应IIIYspecial_ele的数学仿真模型。
[0063] 建立新型编码语音诱发下丘神经响应时空分布模式III的模型的物理电场分布采用COMSOLMultiphysics软件的AC/DC模块来进行仿真。建立新型编码语音诱发下丘神经响应时空分布模式III的模型的神经响应分布采用Neuron软件来仿真。
[0064] 分析线阵电极中八电极上电场变化。所述线阵电极为直线排列的八个电极。所述八个电极等间距分布。
[0065] 3.6.1)分析耳蜗听神经仿真模型中螺旋神经节细胞的电场梯度分布规律。
[0066] 3.6.2)采用傅里叶-有限元法分析一个周期内耳蜗组织中电场的变化规律。
[0067] 3.6.3)建立新型编码语音电刺激诱发下丘神经响应时空分布模式IIIYspecial_ele模型。
[0068] 3.7)判断需要验证的人工耳蜗声调语言的时域精细结构新型编码策略T的有效性。
[0069] 通过调整语音编码对应的电刺激模式参数,使新型编码语音电刺激诱发下丘神经响应时空模式IIIYspecial_ele逼近原始语音诱发下丘神经响应时空定量化模式I。新型编码T语音电刺激诱发下丘神经响应模式IIIYspecial_ele和原始语音刺激诱发下丘神经响应模式IYspecial_o的相似度和需要验证的人工耳蜗声调语言的时域精细结构新型编码有效性成正比。
[0070] 本发明针对现有人工耳蜗传统验证评估方法中存在的不足,提出下丘神经响应评估方法,该方法利用生物体下丘对声调语音的特定神经响应模式作为人工耳蜗的评估方法,既提供了生物体听觉神经通路的响应,又具有客观、定量的评估价值。
[0071] 本发明具有如下的优势:本发明在输入刺激和输出响应之间建立起定量的调控模型,具备和听觉神经通路的接口,比听神经的仿真模型包含了更多的听觉神经中枢的响应信息。与传统的心理物理学评估方法相比,本发明较小程度地受人为主观因素的影响,可以更真实、更准确地反映生物体听觉通路对某种声音编码策略的接受程度。本发明适用于实验室初级研究阶段的新型语音编码策略,可以为现有CI语音编码评估方式补充辅助性的评估工具。附图说明
[0072] 图1为主要技术路线;
[0073] 图2为耳蜗电刺激诱发下丘神经响应数字仿真流程图
[0074] 图3为原始语音和编码语音诱发的下丘神经响应模型示意图;
[0075] 图4为语音刺激和神经电刺激诱发下丘神经响应示意图;
[0076] 图5为耳蜗电刺激-下丘神经响应的电生理检测方案示意图。

具体实施方式

[0077] 下面结合实施例对本发明作进一步说明,但不应该理解为本发明上述主题范围仅限于下述实施例。在不脱离本发明上述技术思想的情况下,根据本领域普通技术知识和惯用手段,做出各种替换和变更,均应包括在本发明的保护范围内。
[0078] 实施例1:
[0079] 参见图1至图5,人工耳蜗声调语言的时域精细结构新型编码的验证方法,主要包括以下步骤:
[0080] 1)建立原始语音诱发下丘神经响应时空定量化模式I。主要步骤如下:
[0081] 1.1)选取适合听觉神经通路研究的实验生物体模型。
[0082] 优选的,本实施例中选取豚鼠作为实验生物体,充分利用了豚鼠本身自然听觉神经通路来验证评估人工耳蜗声调语言的时域精细结构新型编码。
[0083] 进一步,还可以选取大鼠、蒙古沙鼠等作为实验生物体。
[0084] 1.2)使用CLICK声音信号对实验生物体的单耳进行听力曲线测试。测试主要包括听阈测试和听域测试。
[0085] 1.3)对所述实验生物体施行开颅手术,暴露出实验耳对侧的下丘。将多通道记录电极植入所述实验生物体实验耳对侧的下丘。验证多通道记录电极阵列准确插入实验耳对侧下丘的方法为:在实验生物体实验耳的一侧播放白噪声声音信号,当多通道记录电极阵列记录到的响应节拍和声音刺激器给予的白噪声的响应节拍一致,则多通道记录电极阵列准确插入实验耳对侧的下丘。
[0086] 1.4)在实验生物体实验耳的一侧播放纯音声音信号,对多通道记录电极记录到的神经元进行扫频处理,测量并控制该组神经元的特征频率,使所述特征频率分布在8kHz以下。
[0087] 1.5)确定声调语音刺激信号。确定声调语音刺激信号的主要步骤如下:
[0088] I)利用labview软件构建声音刺激器。声音刺激器主要输出纯音、白噪声和声调语音刺激。
[0089] II)所述声调语音信号输入到声音刺激器中。所述声调语音信号来源于中国标准汉语普通话语音库。
[0090] III)所述声音刺激器对输入的标准汉语普通话语音元素组进行编辑,主要包括对声调语音信号元素的持续时间、语音强度和重复播放的次数进行设置。其中,一组声调语音信号包括20个标准汉语普通话语音元素,20个元素之间的顺序采用随机设置。这组声调语音信号播放10次。
[0091] III)声调语音刺激组的参数设置好后,利用16位D/A转换器将编辑后的文本信号转换为电压形式的声调语音信号,在自由音场条件下该电压形式的声调语音信号驱动扬声器输出声调语音刺激。
[0092] 将声调语音信号转换为语音刺激的方法主要是:利用LabView软件对采集到的声调语音信号进行编辑。利用16位D/A转换器将编辑后的声调语音信号转换为语音刺激。
[0093] 1.6)语音刺激时,改变声调语音信号的参数,观察原始语音诱发下丘神经响应I的时间-空间分布规律。主要步骤如下:
[0094] 1.6.1)多通道记录下所述记录电极在所述原始语音刺激诱发实验生物体下丘的神经响应时空分布模式I。
[0095] 确定原始语音刺激输入和下丘神经响应的时空分布模式I的基本元素库。根据所述基本元素库,建立语音刺激基本元素-下丘时空响应的基本成分函数表达模式。
[0096] 建立原始声调语音刺激和声刺激基本元素的解析关系:
[0097] Xspeical_o=fx_o*Xo。  (1)
[0098] Xo是原始语音刺激输入的基本元素矩阵,主要反映声音参数。其中,x01反应声音频率,x02反应声音强度,x03反应声音的声调信息。Xspecial_o是特定的声调语音刺激。fx_o是一个特定的矩阵系数,反映了特定的原始语音刺激和语音刺激基本元素矩阵的传递函数。
[0099] 1.6.2)建立原始声调语音刺激诱发的下丘神经响应I,即所述原始声调语音刺激和诱发下丘神经响应的神经响应时空分布模式I:
[0100] Yspecial_o=fy_o*Yo。  (2)
[0101] Yo是原始语音诱发的神经响应的基本元素矩阵。Yspecial_o是原始声调语音刺激诱发的下丘神经响应的综合反应。fy_o是一个特定的矩阵系数,用于确定特定的下丘神经响应,反映了下丘神经响应的综合反应和下丘神经响应的基本成分之间的函数关系。
[0102] 1.6.3)联立公式1和公式2,建立特定原始语音刺激输入和下丘神经诱发响应之间的模式:
[0103] Yspecial_o=Fo*Xspecial_o。  (3)
[0104] Xspecial_o是特定的原始语音刺激,主要参数包括频率、强度和声调信息。Yspecial_o是特定原始语音诱发的特定的神经响应。Yspecial_o的主要参数包括发放时间间隔、发放速率、发放的空间分布。Fo是特定原始语音刺激输入和下丘神经诱发响应之间的复杂函数关系模式,反映了生物体听觉神经通路的响应属性。
[0105] 联立公式1至公式3,从而得到特定原始语音刺激输入和下丘神经诱发响应之间的复杂函数关系模式Fo的表达式:
[0106] Fo=fy_o*Yo/fx_o*Xo。  (4)
[0107] 式中,Yo是原始语音诱发的神经响应的基本元素矩阵。fy_o是一个特定的矩阵系数,用于确定特定的下丘神经响应,反映了下丘神经响应的综合反应和下丘神经响应的基本成分之间的函数关系。fx_o是一个特定的矩阵系数,反映了特定的原始语音刺激和语音刺激基本元素矩阵的传递函数。
[0108] 2)建立新型编码声调语音刺激诱发的下丘特定神经响应时空分布模式II(Yspecial_e)。
[0109] Yspecial_e=Fe*Xspecial_e。  (5)
[0110] Yspecial_e是新型编码声调语音刺激诱发的下丘神经响应的综合反应。Fe是新型编码声调语音刺激诱发下丘神经响应的传递函数。Xspecial_e是新型编码的原始声调语音刺激。
[0111] 建立新型编码声调语音刺激诱发下丘神经响应的时空模式II(Yspecial_e)主要步骤如下:
[0112] 2.1)确定需要验证的人工耳蜗声调语言的时域精细结构新型编码策略T。
[0113] 所述需要验证的人工耳蜗声调语言的时域精细结构新型编码策略T为HSSE编码策略。
[0114] 2.2)将需要验证的人工耳蜗声调语言的时域精细结构新型编码策略T载入语音处理模块中,所述语音信号处理模块为计算机或数字处理器,主要步骤如下:
[0115] 2.2.1)对语音信号进行预处理。
[0116] 所述对语音信号进行的预处理主要包括预加重、数据分帧和加窗处理。预加重采用一阶巴特沃斯高通滤波器。数据分帧在matlab软件中进行。加窗处理采用Hanning窗。
[0117] 2.2.2)将语音信号频率划分为8个频段。每个所述频段对应一个语音信号通道。
[0118] 2.2.3)利用软件或程序提取每个通道语音信号的基频,选取8个所述语音信号通道内幅值最大的谐波分量。
[0119] 2.2.4)利用软件或程序移频处理,即将原始语音信号的频率移动到基频范围,实现信号的降频。
[0120] 2.3)利用新型编码语音诱发下丘神经响应时空分布II(Yspecial_e),的模型建立并分析新型编码语音刺激诱发出的神经响应时空定量化模式II。
[0121] 3)根据新型语音编码策略T建立对应的新型编码电刺激模式Xspecial_ele,建立Xspecial_ele诱发的生物体下丘神经响应时空模式III(Yspecial_ele),并且可以通过调整新型编码电刺激模式的参数,使其诱发的下丘神经响应时空模式III(Yspecial_ele)能向原始语音刺激诱发下丘神经响应时空模式I(Yspecial_o)的方向逼近。主要步骤如下:
[0122] 3.1)声调语音信号经过时域精细结构新型编码T转换为电流刺激信号。所述电流刺激信号序列分别释放到多通道耳蜗电刺激电极上。
[0123] 在电刺激器中,利用刺激电路将电压刺激转换为电流刺激。
[0124] 所述电刺激器选择有线电刺激器或无线电刺激器。
[0125] 有线听神经电刺激器利用搭载语音编码方案的语音处理模块对输入的语音信号进行编码,形成各个刺激通道信号。对各个刺激通道的脉冲波进行调制后,产生刺激所需的脉冲信号。由刺激电路将电压刺激转换为电流刺激后输入给置于耳内的刺激电极。有线听神经电刺激器利用美国国家仪器(NI)公司开发的Lab View软件实现刺激系统,利用定向电流系数配置的多通道神经电刺激器,提高听神经电刺激对听神经刺激的分辨率,减小相邻通道之间的串扰。有线听神经电刺激器的刺激速率最高500Hz。
[0126] 无线听神经电刺激器的主要结构是基于微线圈阵列的无线多通道柔性集成接口。所述集成接口包含表面电极、接收线圈和无源电路。所述无源电路采用柔性电路板工艺。利用体外的发射电路设置参数可以实现对该植入式电路输出电刺激的参数调整。无线听神经电刺激器可以将其参数范围满足听觉电刺激的需求,用到耳蜗电刺激的实验中。
[0127] 在使用编码语音转换的神经电刺激器时,主要调整三个参数。所述三个参数分别为刺激脉冲频率、刺激脉宽和刺激电流强度。
[0128] 所述刺激脉冲频率主要包括30Hz、200Hz、400Hz、1000Hz、1200Hz或2000Hz。所述刺激脉宽主要包括25μs、50μs或100μs。所述刺激电流强度范围为50-4000μA。
[0129] 3.2)将多通道耳蜗刺激微电极置于所述实验生物体耳蜗内,主要步骤如下:
[0130] 3.2.1)在手术显微镜下,听泡破壁并暴露耳蜗的圆窗和底回。
[0131] 3.2.2)用钻头在耳蜗底回上打洞,将电极经该小洞塞入耳蜗的鼓阶中,使耳蜗微电极触点接近螺旋神经节细胞。
[0132] 3.2.3)将电流刺激输入到刺激电极中。电流刺激经植入的刺激电极释放刺激到耳蜗。
[0133] 3.3)多通道记录刺激电极在下丘区域的响应输出,即电刺激诱发下丘神经响应III(Yspecial_ele)。
[0134] 3.4)电刺激时,改变电刺激的参数和电刺激位置,观察下丘诱发出的神经响应III(Yspecial_ele)的时间-空间分布的变化规律。
[0135] 3.5)利用新型编码语音转换的电刺激诱发的下丘神经响应III(Yspecial_ele)的模型,分析不同刺激模式下对下丘神经响应III(Yspecial_ele)时间-空间分布的阈值和激活有效区域的规律,即分析单极刺激、双极刺激和三极刺激模式对下丘神经响应III(Yspecial_ele)的影响。
[0136] 3.6)建立下丘神经响应III(Yspecial_ele)的数学仿真模型。
[0137] 建立新型编码语音诱发下丘神经响应时空分布模式III的模型的物理电场分布采用COMSOLMultiphysics软件的AC/DC模块来进行仿真。建立新型编码语音诱发下丘神经响应时空分布模式III的模型的神经响应分布采用Neuron软件来仿真。
[0138] 分析线阵电极中八电极上电场变化。所述线阵电极为直线排列的八个电极。所述八个电极等间距分布。
[0139] 3.6.1)分析耳蜗听神经仿真模型中螺旋神经节细胞的电场梯度分布规律。
[0140] 3.6.2)采用傅里叶-有限元法分析一个周期内耳蜗组织中电场的变化规律。
[0141] 3.6.3)建立新型编码语音电刺激诱发下丘神经响应时空分布模式III(Yspecial_ele)模型。
[0142] 3.7)判断需要验证的人工耳蜗声调语言的时域精细结构新型编码策略T的有效性。
[0143] 通过调整语音编码对应的电刺激模式参数,使新型编码语音电刺激诱发下丘神经响应时空模式III(Yspecial_ele)逼近原始语音诱发下丘神经响应时空定量化模式I。新型编码T语音电刺激诱发下丘神经响应模式III(Yspecial_ele)和原始语音刺激诱发下丘神经响应模式I(Yspecial_o)的相似度和需要验证的人工耳蜗声调语言的时域精细结构新型编码有效性成正比。
[0144] 实施例2:
[0145] 本实施例将人工耳蜗声调语言的时域精细结构新型编码的验证方法和听觉神经网络的数学仿真方法对比。听觉神经网络的数学仿真方法参见图2。对比步骤如下:
[0146] 1)利用人工耳蜗声调语言的时域精细结构新型编码的验证方法对待验证的人工耳蜗声调语言的时域精细结构新型编码进行验证。主要步骤如下:
[0147] 1.1)选取实验生物体。本实施例选取豚鼠作为实验生物体。
[0148] 1.2)建立原始语音刺激诱发下丘神经响应模式I(Yspecial_o)
[0149] 1.3)建立新型编码语音电刺激诱发下丘神经响应模式III(Yspecial_ele)。
[0150] 1.4)通过调整语音编码对应的电刺激模式参数,使新型编码语音电刺激诱发下丘神经响应模式III(Yspecial_ele)逼近原始语音刺激诱发下丘神经响应模式I(Yspecial_o)。
[0151] 1.5)新型编码语音电刺激诱发下丘神经响应模式III(Yspecial_ele)和原始语音刺激诱发下丘神经响应模式I(Yspecial_o)的相似度和需要验证的人工耳蜗声调语言的时域精细结构新型编码有效性成正比。
[0152] 2)听觉神经网络的数学仿真方法对待验证的人工耳蜗声调语言的时域精细结构新型编码进行验证。主要步骤如下:
[0153] 2.1)采用COMSOLMultiphysics软件的AC/DC模块建立耳蜗听神经的仿真模型。耳蜗听神经的仿真模型的电流强度范围为60~4000μA,频率范围为2000Hz,脉宽范围为25~100μs。
[0154] 2.2)选取和刺激电极长轴方向垂直的截面观察电极间电流密度分布。分析线阵电极中八电极处电场变化,分析螺旋神经节细胞的电场梯度分布规律,并采用傅里叶-有限元法分析一个周期内组织中电场的变化规律。
[0155] 2.3)建立下丘神经响应模型,分析不同刺激模式下对下丘神经响应时间-空间分布的阈值及激活有效区域的规律,即单极刺激、双极刺激和三极刺激模式的影响。
[0156] 2.4)利用听觉神经网络的数学仿真模块对新型语音编码策略进行测试。
[0157] 3)将人工耳蜗声调语言的时域精细结构新型编码T的验证方法和听觉神经网络的数学仿真方法对比。
[0158] 值得说明的是,和现有技术中存在的听觉神经纤维的数学仿真方法相比,该发明中的仿真水平更高,能反映听觉初级中枢(即下丘)对输入语音信号的响应人工耳蜗时域精细结构。
高效检索全球专利

专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。

申请试用

分析报告

专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。

申请试用

QQ群二维码
意见反馈