基于生成对抗网络的语音通信质量提升方法研究

来源 :齐鲁工业大学 | 被引量 : 1次 | 上传用户:lixinjun678
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
语音通信中引起语音质量下降的原因有很多,比如语音信号采集过程中会因为背景噪声的出现而导致部分语音信息被淹没、破坏,从而降低语音信号的质量,再比如,语音信号传输过程中为了降低传输速率而采用压缩编码技术也会导致语音质量的损失。除此之外,语音信号在各种处理环节中也可能会有一定程度的质量损失。近几年基于深度学习的各种算法逐渐得到研究,其中生成对抗网络技术在多媒体信号处理领域展现出了优异的性能。因此,针对于语音通信过程中的语音质量损失问题,本文提出了一种基于生成对抗网络的语音质量提升方法,并在实际系统中进行了应用。论文首先提出了一种解决语音传输过程中压缩编码及加解密引起语音信号质量下降的方法。该方法利用条件生成对抗网络强大的学习能力来对编解码后的语音以及加解密后的语音进行质量提升。通过搭建生成器G与鉴别器D网络,并引入在生成器G中引入跳跃结构指导生成增强数据,使用鉴别器D中特征向量输入生成器G中作为附加信息构建条件生成对抗网络。使用编码器编码前语音和编码后的语音组成第一组数据集,使用语音加密前语音和解密后的语音组成第二组数据集,使用语音加密前语音和经过语音加密后、编码器编解码后,再经过解密后的语音组成第三组数据集,利用三组数据集对GAN模型进行训练,用训练好的GAN模型对三类质量下降的语音进行质量提升。使用客观语音质量评价指标来证明方法的有效性。针对背景噪声引起的语音质量损失问题,论文提出了一种基于背景噪声分类的语音增强生成对抗网络模型。该模型利用神经网络设计一种背景噪声分类器,分类器通过提取带噪声的语音的Mel频率倒谱系数,利用卷积神经网络对各类噪声背景进行分类,并将分类好的带噪语音进行标记,为后续不同种类背景噪声的语音增强网络做好前置准备;对已有的生成对抗网络中的最小二乘损失函数进行了优化,优化后的函数通过超参数ξ来控制影响7)1范数正则化的权重。通过超参数ξ来不断调整增强语音与干净语音之差的绝对值,解决了训练造成过拟合化引起的生成语音质量下降的问题;对所需完成的语音增强任务设计了新的生成对抗网络模型,新的生成对抗网络模型由多个生成器G与一个鉴别器D组成,尽量在不影响性能的前提下对模型进行简单化。其中,每个生成器G对一种背景噪声的带噪语音进行增强,鉴别器D用于判断多个生成器G传输来的增强语音与真实语音类型。通过与维纳滤波法、基于深度神经网络的语音增强算法和基于生成对抗网络的语言增强算法进行对比分析,基于背景噪声分类的语音增强生成对抗网络模型在低信噪比环境下具有更好的泛化能力,证明了模型的有效性。最后,介绍了实际应用中端到端语音加密终端,并将加密终端与配备两个模型的Jetson Nano开发板连接进行功能实现,并通过主观语音质量评价标准来对增强后语音进行质量评价。
其他文献
甜玉米是一种重要经济农作物,我国是甜玉米消费和种植大国。工厂化大批量穴盘育苗时,在育苗中的播种环节,由于甜玉米种子形状大小不一、形态凹凸不平,所以滚筒式排种器对穴盘进行播种时会发生漏播空穴现象,面对这些漏播空穴,需要额外的人工进行识别和手动补种。本课题基于机器视觉技术研究设计一套面向甜玉米的穴盘补种机,用以解放人的眼睛和双手,提高补种效率。课题主要研究设计内容如下:1、介绍了甜玉米穴盘育苗的背景,
学位
腕关节在日常生活或体育活动中活动频率很高,也非常容易发生损伤,其次,中风也是造成腕关节失去活动能力的主要原因,合理科学的康复训练可以加快受损部位痊愈。为了适应腕关节运动轴线错位不相交的特点,开展了运动轴线可调式并联腕关节康复装置的设计及理论研究,主要研究内容如下:从解剖学出发,对人体腕关节的结构特点及运动需求进行了分析,提出了一种基于3-RSR并联机构的腕关节康复机构。该机构具有两转一移三自由度,
学位
随着油田开发时间的延长,高含水油井逐年增多,应用化学堵水、机械堵水等控水措施虽取得了一定的治理效果,但也存在舍层等一些缺陷。本文通过用高强度化学堵剂封堵高含水油井高含水层位的人工裂缝,后期实施同轴随进增效射孔技术在同层近井地带产生新的人工裂缝,实现高含水油井高含水层再利用,达到挖潜高含水层剩余油的目的。现场实施了3口井,目前平均单井日产液5.8t,日产油1.1t,累计增液1730t,累计增油313
期刊
海水淡化是解决水资源短缺的重要手段,目前主要采用燃煤发电提供能源,因此导致生产淡水同时不但消耗了大量化石能源,而且还会产生大量温室气体排放,造成严重的环境污染。在国家碳达峰、碳中和政策实施背景下,使用清洁能源对海水淡化工程建设进行转型升级已是大势所趋,但目前此类工程规模较小,大多处于示范工程试运行阶段,在大规模推广前必须提出精确的计量方法和评估指标,对工程设计的碳排放情况进行详细的核算和评估。当今
学位
战斗机是现代化军事的重要组成部分,战斗机的先进水平决定了国家军事力量和国际地位。由于航母甲板面积的限制以及降落困难问题,对战斗机起降性能要求尤为重要。安装大摆角矢量喷管的战斗机可完成垂直起降,同时矢量喷管能完成大迎角和超音速飞行等功能,使得战斗机机动性更强。相对于单一的串联机构或并联机构,串并混联机器人有工作空间较大、结构强度高、累计误差较小的优点。因此,串并混联机构在航空领域的研究及使用具有重要
学位
学位
混沌理论是非线性领域的研究热点,在通信、航天、生物、军事等领域有着广泛的应用。近几年,混沌系统在复数域的研究引起了很多学者的关注。相比于实混沌系统,状态变量处在复数域的复混沌系统,将具有更加复杂的系统特性和动力学行为。对于复超混沌系统来说,其具有更高的维度和更多的可控参数,应用在通信加密等领域,能够大大增强通信的安全性。因此,本文构建了几类新的复超混沌系统,对其系统特性和吸引子进行了分析,提出了参
学位
劳动教育作为新时代高校实施立德树人根本任务的重要途径,承担着重要作用。“大思政”的教育理念提供了指引方向和根本遵循,使得劳动教育和其他学科教育的育人目标一脉相通。劳动教育虽然取得了一定的实践成效,如学科课程中劳动教育渗透、志愿服务项目、日常的劳动实践活动等,但其发展现状仍然存在课程思政动力不足、师资队伍思政意识不强、管理体系思政高度不够等相关问题。因此,本文基于思政视角提出了新时代高校劳动教育的实
期刊
FITS过钻具测井系统是中国自主研发的测井装备,该系统通过在鄂尔多斯盆地陇东地区直井中与CPLog、LOGIQ等通用测井仪器对比试验和长7页岩油储层45口水平井的规模应用。优化了声波仪器的算法和外壳材质,改进了密度仪器的源仓设计,完善了测井采集工艺流程,其性能进一步提升,具备了相应的测量精度和较高的测量一致性,测井曲线的重复性、一致性及测量精度均能达到行业标准;编写了FITS过钻具测井系统多种测井
期刊
随着人工智能技术的发展,机器人与人类生活越来越密切,机器人逐渐成为了人类生产和生活中的好帮手,既能够代替人类从事复杂的劳动,也能在生活中改善人类的生活质量,小到扫地做饭、大到汽车生产。但是目前的大部分机器人并不是理想型的智能机器人,只能在简单的环境中从事着简单的劳动。在复杂的环境下,尤其是在人与机器人共存的复杂环境下,如何实现机器人自主应对复杂多变的人与机器人共存的复杂环境变成了一个有待解决的问题
学位