随机深度网络在声学建模上的研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:HEXINLONG19871006
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
实现机器与人类的自然交流,是人们一直以来的梦想。在过去50年里,语音识别技术的研究取得了巨大的进展,尤其是2011年以来,深度学习理论的完善、计算机性能的大幅度提升以及海量语音训练数据的积累,使得语音识别开始进入商用化时代。相比于传统网络,深层次神经网络(very deep neural networks)具有更好的模型拟合和表达能力,但目前其在语音识别领域的应用研究仍然匮乏,究其原因,深层次神经网络在训练时存在两大难点:一方面,受梯度弥散现象的影响,梯度数值在误差反传的过程中不断衰减,导致接近网络输入层的参数难以得到更新;另一方面,网络具有大量的参数,训练以及测试需要耗费大量时间。本论文集中于随机深度网络算法在语音声学建模上的研究。通过采用残差网络以及在训练过程中随机丢弃部分残差网络块的方式,从而改善训练过程中容易出现的梯度弥散问题,再配合模型压缩算法,在控制模型参数规模的条件下,训练出更深层的语音声学模型,最终实现更低的词错误率。实验结果表明:相比于传统网络,随机深度网络在数据有限的情况下对语音系统识别率的提升较小,而在训练数据充足的条件下却能够显著地提高系统的识别率。同时,模型压缩技术的应用,有效降低了运行时的参数量和计算量。该研究结论在语音声学建模的设计上具有重要的参考价值。
其他文献
等离子体天线是使用等离子体代替传统金属导体接收和发射电磁波的天线,和传统的金属天线相比,等离子体天线具有隐身性能好、可重构性强和互耦性低等优点,因而在军事和民用方
云计算的发展有望可以重新定义个人电脑。云服务提供商搭建一个个大型的数据中心并利用虚拟化技术向个人和企业提供他们所需的计算机资源,如虚拟机等。用户可以通过远程连接
在国家互联网+战略以及5G网络即将到来的大背景下,各大运营商对于移动通信基站建设数量大幅增加。而蓄电池作为基站备用电源是供电系统中的关键部分,如果在发挥作用时产生故
东北酸菜和蜜蜂肠道中富含大量乳酸菌,乳酸菌是酸菜发酵过程中的主要菌群,在酸菜制作中起主要作用;蜜蜂肠道菌群由特定的共生菌组成,而乳酸菌对蜜蜂的健康具有重要作用。因此了解其乳酸菌的多样性对东北酸菜的工艺制作和蜜蜂的健康都有重要意义。本文的研究主要通过phe S基因序列并结合16S r RNA基因序列对东北酸菜和蜜蜂肠道中的乳酸菌进行鉴定分析,从东北酸菜中分离出39株乳酸菌,蜜蜂肠道中分离出66株乳酸
随着计算机信息技术和网络通讯技术的快速发展,基于组织机构代码基础信息数据库的各类应用如雨后春笋般涌现,在海关、银行、税务、统计等领域得到广泛应用,并取得了良好的社
当今时代,信息技术化迅速崛起,引领着世界科技的发展。而信息化办公,利用当(?)科技的优势,及时的报备数据,可以避免数据的重复提交,有效的弥补了人工管理的(?)所以大多数商家
快速城镇化以来,在中国城乡空间格局中,位于大都市郊区的乡村,其乡村问题最为严峻与尖锐。大西安作为中国西北地区最大的都市区,其中的城郊乡村面对着复杂而多变的城乡环境,
电力线通信技术在智能电网的发展中起到了非常重要的作用,电力线系统因为有遍布极为广泛的基础设施,可以使传输的数据依托现有的电力线输电网络传输到世界的每一个角落,大大
近年来,Janus纳米复合粒子因其形貌、组分、性能的不对称性,在固体表面活性剂、催化、自驱动马达、生物医学等领域具有广阔的应用前景,受到研究者的广泛关注。但是由于其制备过程涉及热力学和动力学两个因素,其结构很难精确调控,特别是合成具有可功能化的Janus纳米复合粒子仍处于探索阶段。因此,如何可控的设计并合成Janus纳米复合粒子,深入理解其形成机理,并拓展其功能性,以最终实现其高效可控制备和实际应
空气源热泵节能环保且适用范围广,作为建筑冷热源被广泛应用在我国大江南北,但使用过程中结霜是影响机组运行效果的首要因素,故各地都纷纷展开空气源热泵结除霜问题的研究。南北方室外环境温湿度差异较大,机组极易存在长江以南的有霜不除及北方的无霜除霜的误除霜现象,空气源热泵结霜及误除霜现象严重影响机组制热效果。本文针对贵阳中低温高湿的典型温度环境特征引起的空气源热泵结霜问题进行理论模型和实验研究分析,分析机组