语音信号处理课件短时傅立叶分析与综合与听觉特征

上传人:hy****d 文档编号:243012289 上传时间:2024-09-13 格式:PPT 页数:33 大小:236KB
返回 下载 相关 举报
语音信号处理课件短时傅立叶分析与综合与听觉特征_第1页
第1页 / 共33页
语音信号处理课件短时傅立叶分析与综合与听觉特征_第2页
第2页 / 共33页
语音信号处理课件短时傅立叶分析与综合与听觉特征_第3页
第3页 / 共33页
点击查看更多>>
资源描述
单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,人耳感知原理,SDTFT的两种解释,1.滤波解释,2.调制解释,1,(1),2,3,滤波观点,(3),(2),可解释为,x,(,n,),调制到频率,0,4,5,调制观点,(4),(3)式改写为,6,信号调制,1.载波,特点:频率较高,7,2.被调制信号,一般来说,频率远低于载波,8,调制后的信号,9,语音信号的调制解释,语音可看作多个信号被调制到多个载波后叠加的结果,10,11,12,二、语音听觉系统(一个十分巧妙的音频信号处理器),人类接收语音由人耳来完成,空气振动由耳廓收集,经外耳道而抵达鼓膜,鼓膜随之振动,使鼓室中的空气和听骨链也发生振动,听骨链的振动经前庭窗(卵圆窗)激励前庭淋巴,变为液波,液波使位于基底膜上的螺旋器受到刺激,将神经冲动经听神经传到中枢而产生听觉。,13,正常人的听觉系统是极为灵敏的,可听声的范围为0.02Hz-20kHz。,可听声的最小声压级(dB)称为听阈。-5 130dB,对低频和高频是不敏感的,听阈为60dB,在1kHz附近最敏感。,14,声源,声压/Pa,声压级/dB,飞机附近,200,140,织布车间,20,100,地铁,0.63,90,繁华街道,0.063,70,普通谈话,0.02,60,安静房间,0.002,40,耳语,0.00063,30,树叶沙沙声,0.0002,20,农村静夜,0.000063,10,15,1.,耳的结构(外耳、中耳和内耳)和功能,外耳:对声源定位和对声音放大的作用,由耳廓和外耳道组成。,耳廓呈漏斗型,其作用是收集声音。,外耳道直至鼓膜,其中充满空气,是一谐振腔,使谐振频率附近的频率成分有某些放大作用,导致声音有某些失真。,16,外耳道的长度为2.5cm,对波长为其4倍作用的声波能起到较好的放大作用,即有:4,2.5=10cm, 3000-4000Hz声波的波长为8.5cm-11.41cm,因此外耳道对这部分频率的信号有扩音作用,10dB左右。,外耳道,17,中耳,结构:总容量为2立方厘米,内含三块听小骨,锤骨、砧骨、镫骨,其中锤骨与鼓膜相接触,镫骨则与内耳的前庭窗相接触。,作用:进行阻抗变换,将中耳两端的声阻抗匹配起来;保护内耳。在一定声强范围内,听小骨实现声音的线性传递,而在特强声时,实现非线性传递。,18,内耳,结构:主要部分是耳蜗,耳蜗长约3.5cm,呈螺旋状盘绕2.5-2.75圈,是一个密闭的管子,内部充满了淋巴液。,前庭窗,镫,骨,基底膜,19,作用:将振动变换为神经冲动。当声音传入中耳时,镫骨的运动经过前庭窗引起耳蜗内液体压强的变化,从而引起行波沿基底膜的传输,引起基底膜的振动。不同频率的声音产生不同的行波,其峰值出现在基底膜的不同位置上。基底膜的振动导致沿基底膜分布的毛细胞的电位发生改变,引起神经冲动,传递给大脑,产生听觉。,20,如果信号是一个多频率的信号,则产生的行波将沿着基底膜在不同的位置产生最大幅度,从这个意义上讲,耳蜗就像一个频谱分析仪,将复杂信号分解成各种频率分量,这种作用称为人耳,的时频分析特性。,耳蜗在语音接收过程起着重要的作用。,21,人工耳蜗是一种电子装置,能帮助重度及极重度耳聋患者获得或重新恢复听觉。它代替病变受损的听觉器官,把声音转换成编码的电信号传入内耳耳蜗,刺激分布在那里的听神经,再由大脑产生听觉。,人工耳蜗,22,麦克风接收声音,并通过导线将其传至言语处理器;言语处理器对声音进行数字化、滤波编码等处理,并将编码信号经导线传至传输线圈;传输线圈将编码信号通过耦合传至皮下的接收器;接收器对编码信号进行解码;按信号选择一定位置的电极,刺激耳蜗内的听神经纤维,使其产生兴奋,将信号传入大脑,产生听觉。,人工耳蜗的工作原理,23,2.,声音传入内耳的途径,由空气传导,称为气导,其过程为:,声波,耳廓,鼓膜,听骨,内耳,基底膜上,毛细胞电位改变,神经冲动,由骨传导,称为骨导,其过程为:,声波,颅骨,外淋巴振动,内耳,基底膜上毛细胞电位改变,神经冲动,24,3.,人耳的两个重要特性,(1)耳蜗对声信号的时频分析特性,(2)人耳的掩蔽效应,人耳的掩蔽(masking phenomenon)效应:在一个强信号附近弱信号将变得不可闻,被掩蔽掉了。,25,掩蔽阈值,被掩蔽掉的不可闻信号的最大声压级称为掩蔽门限和掩蔽阈值(masking threshold),在这个掩蔽阈值以下的声音将被掩蔽掉。,掩蔽效应分为同时掩蔽(频域掩蔽)和短时掩蔽(时域掩蔽)。同时掩蔽是指存在一个弱信号和一个强信号,当其频率接近时,强信号会提高弱信号的阈值,就会导致弱信号变得不可闻。,26,1kHz的听阈,1dB,20dB,4dB,可闻声,3dB,不可闻声,图形描述,27,同时出现的A声和B声,若原来A声的阈值为50dB,由于另一个频率不同的B声的存在使得A声的阈值提高了68dB,则B声称为掩蔽声,A声称为被掩蔽声。掩蔽量为68dB50dB18dB。,数学描述,28,掩蔽效应的作用,当只有A声时,必须将声压级在50dB以上的声音信号传送出去,50dB以下的声音是听不到的。当同时出现了B声,由于掩蔽效应,使得A声中的68dB以下的声音是听不到了,可以不予传送,只是传送50dB以上的信号。,同时掩蔽时,掩蔽声越强,掩蔽作用越大;掩蔽声和被掩蔽声的频率越接近,掩蔽效果越明显,当频率相同时,掩蔽效果最大。,29,前向掩蔽:若被掩蔽声A出现后,相隔(0.05s,2s)之内出现了掩蔽声B,对A起掩蔽作用,因为A声尚未被人所反应接收而强大的B声已来临。,短时掩蔽 前向掩蔽和后向掩蔽,后向掩蔽:掩蔽声B即使消失后,其掩蔽作用仍将持续一段时间,约(0.5s,2s),这时由于人耳的存储效应所致。,30,频域掩蔽,0,31,耳蜗的恒Q特性,10ms,32,美尔(MEL)频率,33,
展开阅读全文
相关资源
正为您匹配相似的精品文档
相关搜索

最新文档


当前位置:首页 > 图纸专区 > 课件教案


copyright@ 2023-2025  zhuangpeitu.com 装配图网版权所有   联系电话:18123376007

备案号:ICP2024067431-1 川公网安备51140202000466号


本站为文档C2C交易模式,即用户上传的文档直接被用户下载,本站只是中间服务平台,本站所有文档下载所得的收益归上传人(含作者)所有。装配图网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对上载内容本身不做任何修改或编辑。若文档所含内容侵犯了您的版权或隐私,请立即通知装配图网,我们立即给予删除!