内容无关的话者验证模型及其应用

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:weiluguang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前的“人工智能”因为深度神经网络的出现而达到了一个新的发展阶段,深度学习技术以其能从相对原始的数据中提取丰富信息的能力而被应用于各大领域,带动了人工智能应用的落地。语音信号处理方面的应用在深度学习技术的推动下快速发展,语音数据本身就包含语言学信息、副语言学信息等多类信息,深度神经网络可以根据任务目标自动抽取目标所需要的信息而尽量剔除其余信息,在语音领域有着显著的推动作用。深度神经网络在话者识别领域也有所发展,但目前基于深度神经网络的话者识别模型大多是内容相关的,在进行验证时,同时用到了语言学信息,且对语音片段的长度有要求,而实际应用场景中,话者提供给模型进行识别的语音片段持续时间更短,因此本课题提出了应用于短语音片段的内容无关话者验证模型。对语音片段进行降噪操作之后,我们会将语音片段转化成频谱特征。语音信号数据属于时间序列数据,但在内容无关的说话人验证任务中,我们要提取的话者个人信息并不是时序信息,所以我们用卷积神经网络模型来提取特征,并与GRU网络模型提取的特征相比较。为了改进模型,我们提出了同时训练多个损失函数的多任务验证模型,其中用到了三重态损失函数(TripletLoss)与交叉熵,并对TripletLoss进行了改进。通过实验证明,多任务模型模型比单任务模型的性能更好,改进的TripletLoss也提升了模型的性能。我们还建立了端到端的多任务话者验证模型,并提出了提取神经网络模型的中间层特征向量进行话者验证的端到端型,试验证明使用中间层特征向量能提升端到端验证模型的性能。我们在话者验证模型的基础上只做了开集上的话者识别模型,还将应用于短语音片段的多任务验证模型应用于文本匹配任务里,并通过实验验证,证明了在文本匹配任务上,多任务模型的性能也比单任务模型的性能好。
其他文献
近年来,基督教在我国大陆农村地区快速传播,与此同时引起了越来越多学者和社会人士关注。本文以晋南Z镇为研究地点,采用半结构式访谈和参与观察的方式搜集资料,探析在快速城
本文的研究主题是新时代乡村振兴背景下的乡村治理权威结构。乡村治理体系现代化要求村庄治理者要具有领导能力、服务能力和公共管理的能力。新时代乡村振兴背景下,乡村精英
移动通信技术经过多年的发展,已经从1G发展到了4G,并即将迈入5G时代。传统的多址接入方案利用资源(时间,频率,或编码)的正交性来避免用户间的干扰。随着移动互联网技术和物联
天线作为能够有效辐射和接收电磁波的重要装备,其散射特性在军事领域一直作为一个重要的设计参数。传统的远场天线散射测量方法不仅对测量环境的要求较高,而且保密性及获取的信息量相较于近场测量也有着较多的劣势。本文对双站柱面近场测量的三维算法进行推导,设计了一款可用双站柱面近场散射测量的近远场变换程序,输入对应的近场散射数据文件,便可求解出相应的远场散射特性,同时根据天线散射时所特有的模式项,设计了可用于分
随着信息时代的发展,人们对信息的需求逐渐也呈爆炸式增长的趋势。5G于2018年6月完成第一阶段的全功能标准化工作。极化码作为新型的可近容量传输的先进信道编码,在5G的eMBB
韩德烈(Emily Marie Hundertmarck,1912-1998)于1936年受德国巴陵信义会(Berlin Missionary Society)派遣来到中国传教,此后在华工作生活十余载,直到1949年。她先后在惠州、
化学是一门以实验为基础的学科,理性思维的形成对化学学科的学习具有着重要的指导作用。培养学生理性思维的形成与发展能力对学生在将来的学习、个人生活以及适应社会发展同
近几十年来,突尼斯经历了快速发展,许多突尼斯改革和投资也得到的发展,但这些改革并未涵盖教育和就业等所有部门,因为突尼斯的第三个周期正日益面临失业问题。2018年,接受高等教育的突尼斯人中有29.3%失业,而社区总失业率为15.5%。近10年来,毕业生的总失业率也在上升,从2008年起,失业率为42,7%,到2017年,失业率达到52%,甚至性别之间的失业率存在显著差异,男性为17%,女性为38.8
员工培训手册是公司新入职人员必备的培训教材,可以让员工了解公司的相关条例,明确岗位职责。笔者承接《金摇篮月子中心员工培训手册》汉译英的翻译项目,该项目的委托人为便于手册在公司内部培训使用,格外强调译本语言要具有简洁性,故笔者从委托方的要求出发,根据具体文本灵活使用合适的技巧,在保证准确性的前提下,调整译本语言追求简洁。本报告重点分析笔者在简洁化翻译的过程中碰到的难点及相应的解决策略。在报告中,笔者
法国哲学家埃德加·莫兰于2004年写了《伦理学》,这是他在探讨复杂性方法的系列著作《方法》的第六卷写就的。他认为在21世纪的今天,虽然科学、经济、社会高度发展,但也带来了精神的匮乏、心理的焦虑、伦理的危机等问题。面对伦理矛盾和不确定性,在伦理危机的湍流中,每个人都不得不进行行动选择、博弈和谋略。埃德加·莫兰用其复杂性认识论使我们看到随机的环境条件给任何道德行为带来的后果不确定性,以及多种多样的道德