基于语音信号可视化的听觉补偿方法研究

来源 :东北大学 | 被引量 : 0次 | 上传用户:snoopy10222001
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
语音是人类之间交流信息的主要手段之一,目前,针对丧失了语言交流能力的听力障碍者,出现了语言康复训练系统和语言读写系统两类辅助设备。将语音信息以视觉或触觉的方式传递给听力障碍者是进行听觉补偿的新方法,因此论文以语音可视化为背景,进行听觉补偿方法的研究。   本文针对目前听力障碍者的听觉补偿方法,建立了语音信号图像显示的听觉补偿方法。以5个单元音以及词汇为实验对象,应用语音信号处理的基本理论,对语音信号的预处理、特征提取与识别算法等环节进行了计算验证、性能分析和结果评述。应用神经网络理论基础,构建语音识别神经网络模型BP(Back-PropagationNetwork)网络结构,采用双门限法端点检测后用美尔频率倒谱系数MFCC(Mel-frequency cepstral coefficient)提取语音特征参数,用动态时间规整DTW(Dynamic Time Warping)技术规整后输入构建好的BP网络结构中,进行网络学习,网络训练完毕后将测试样本输入已训练的网络进行识别。对识别后的语音信号,采用语音信号的共振峰、基频、MFCC等特征参数建立图像显示信号,横轴对应为语音信号采样时间,纵轴为频率,建立实验对象学习方法,并进行结果分析,使用Matlab完成算法实现。   实验结果表明本文采用的算法不但有很高的识别效果,而且语音的图像显示表证了语音的意义,可以帮助听力障碍者感知声音,具有很好的研究价值和应用价值。
其他文献
学位
学位
学位
本文在研究大量国外文献资料及产品的基础上,研制了我国第一台工业脉冲燃烧液体加热装置,并在不同工况下,对该装置的热工特性作了全面测试,得出了热效率以及燃气压力与热负荷、热
学位
对生物组织等光学混浊介质的实时、无创检测常常采用光学方法。近红外光谱分析方法被认为是一种比较有应用前景的无创检测技术。目前,应用近红外光谱分析方法进行混浊介质检测
学位
学位
学位
本文通过对荣华二采区10
期刊
谱方法在理论上具有无穷阶精度和指数阶收敛性。随着计算机技术以及数值模拟技术的不断发展,谱方法已成为当前计算流体力学领域的主要数值方法之一。  以Chebyshev多项式作