【摘 要】
:
为了解决语言障碍者与健康人之间的交流障碍问题,提出了一种基于神经网络的手语到情感语音转换方法。首先,建立了手势语料库、人脸表情语料库和情感语音语料库;然后利用深度卷积神经网络实现手势识别和人脸表情识别,并以普通话声韵母为合成单元,训练基于说话人自适应的深度神经网络情感语音声学模型和基于说话人自适应的混合长短时记忆网络情感语音声学模型;最后将手势语义的上下文相关标注和人脸表情对应的情感标签输入情感语
【基金项目】
:
国家自然科学基金(62067008,31860285); 甘肃省自然科学基金(21JR7RA117); 甘肃省教育科学“十三五”规划2020年度重点课题GS[2020]GHBZ190;
论文部分内容阅读
为了解决语言障碍者与健康人之间的交流障碍问题,提出了一种基于神经网络的手语到情感语音转换方法。首先,建立了手势语料库、人脸表情语料库和情感语音语料库;然后利用深度卷积神经网络实现手势识别和人脸表情识别,并以普通话声韵母为合成单元,训练基于说话人自适应的深度神经网络情感语音声学模型和基于说话人自适应的混合长短时记忆网络情感语音声学模型;最后将手势语义的上下文相关标注和人脸表情对应的情感标签输入情感语音合成模型,合成出对应的情感语音。实验结果表明,该方法手势识别率和人脸表情识别率分别达到了95.86%和92.42%,合成的情感语音EMOS得分为4.15,合成的情感语音具有较高的情感表达程度,可用于语言障碍者与健康人之间正常交流。
其他文献
作为人们日常生活中必不可少的物品——盐,是一种特殊的商品。从古至今,盐都受到政府的管控,特别是在古代,盐税更是成为国家的重要财政来源。改革开放以来,我国虽然依然延续着传统的盐业管理体制,总体而言,我国所实行的这种盐业专营体制在促进经济发展、维护社会稳定、提高国民身体素质等方面确乎起到了积极的作用;但是,这种盐业专营体制也存在着政企不分及其由此所衍生的一系列问题;此外,随着全面深化改革的渐次深入进行
现如今我们国家经济、科技水平不断提升,许多新型技术、设备也应运而生。在物联网背景之下,人们的生活发生翻天覆地的变化,计算机科学技术的运用让人们学习、工作、生活更加便利。本文阐述了物联网的概念,分析物联网的三个核心技术,并且提出计算机科学技术对物联网的推动作用,以便进一步提升计算机科学技术水平,促进社会进步与发展。
在社会高速运转的背景下,我国物联网技术逐步发展起来,且在各个行业领域中有着突出贡献,使得信息交流与沟通的速度得到了大幅提升。但与此同时,计算机网络安全问题也层出不穷,严重制约了物联网技术的发展脚步,因此本文从物联网技术相关概述展开分析,并对物联网计算机网络安全问题进行详细讨论,最后深入探讨计算机网络安全的防护措施,以供相关人员参考。
本文以“双碳”目标为背景,以河南省周口中心港为例,从碳成本、运输成本和时间成本三方面对集装箱多式联运进行建模分析,并使用Python求解优化模型,得出货源城市通过不同运输方式的运输量以及各运输成本数据。分析得出,周口中心港的多式联运存在运量限制,不能满足越来越庞大的货运需求;并随着排放限额的缩减,货主存在时间压力及运输压力的双重考验。因此,扩大多式联运中铁路和水路的运量占比显得尤为重要,需要相关部
自改革开放之后,我国的盐业管理体系便经历了以下几个阶段,即改革初步探索阶段、改革中期尝试阶段以及改革后期的实施阶段。改革初步探索主要是对行政管理的体系进行改革,同时将经济管理体系的改革当做辅助;而改革中期的尝试阶段则形成了将食盐专营当作核心且工业盐领域开放的新型盐业管理制度;最后在改革后期的实施阶段,实行了政企工作分离的模式,构建了有关工业盐去向的监督与管理体系,形成突发状况应对管理政策,这一时期
<正>2021年7月19日,市政府第133次常务会议审议通过《上海市盐业管理规定》(以下简称《规定》)。目前,《规定》已经正式公布,并于2021年9月1日起施行。一、为什么要修订《规定》?加强本市盐业管理,对保障食盐供应安全和人民群众身体健康具有重要意义。《上海市盐业管理若干规定》(以下简称《若干规定》)于2001年颁布施行,2010年、2015年分别作过简易修订。
<正>2022年10月22日,举世瞩目的中国共产党第二十次全国代表大会,在北京胜利闭幕。10月16日,习近平代表第十九届中央委员会向大会作报告。报告中深刻阐述了过去五年的工作和新时代十年的伟大变革,科学谋划了未来五年乃至更长时期党和国家事业发展的目标任务和大政方针。应急管理系统基层代表纷纷表示,新时代十年的伟大变革彪炳史册、激荡人心、催人奋进。