基于深度学习的单通道语音分离技术研究

来源 :南京邮电大学 | 被引量 : 1次 | 上传用户:lmtc5238
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
单通道语音分离(Single Channel Speech Separation,SCSS)是指从一维混合语音中恢复出多个语音的过程。这是一种欠定问题,解决起来极为困难。但是由于单个麦克风部署简单、价格低廉等特点,SCSS被广泛应用于各个领域。因此,对于单通道语音分离的研究具有一定的实用意义。近年来,深度神经网络(Deep Neural Network,DNN)常被用于解决单通道语音分离问题,它通过学习混合语音与目标源之间的非线性关系来解决语音分离问题,并取得了突出的成果。本文利用深度神经网络针对无噪和含噪情况下的单通道语音分离问题进行了一系列的探讨和研究。同时,在现有方法的基础上,对基于深度神经网络的单通道语音分离算法做了一定的优化。针对无噪和含噪两种情况,分别提出了利用联合约束算法以及幅度相位联合估计算法。实验结果表明,所提算法有效提高了语音的分离质量。本文的主要工作内容和贡献包括以下几个方面:(1)介绍了语音分离问题的研究意义和发展现状。详述了深度神经网络的原理与训练过程,并阐述了常见的声学特征和训练目标。剖析了基于深度神经网络解决单通道语音分离的系统框架及其实现过程。(2)针对无噪环境中的单通道语音分离问题,提出了基于双输出深度神经网络的单通道语音分离联合约束算法。该算法以传统基于双输出深度神经网络的单通道语音分离算法为基础,提出了一种具有联合约束的损失函数,并在该损失函数的指导下训练深度神经网络。该损失函数充分挖掘了深度神经网络双输出间的联合关系,通过联合约束来进一步约束网络参数使得估计语音幅度谱尽可能地逼近纯净语音幅度谱。最后实验仿真验证所提算法有效提高了语音的可懂性,减少了分离重构语音信号的失真。(3)针对噪声环境中的单通道语音分离问题,提出了基于深度神经网络的幅度相位联合估计的单通道含噪语音分离算法。传统方法通过训练单个DNN来直接分离含噪混合语音,且忽略了相位对于语音质量的影响。论文提出对语音信号的幅度和相位进行联合估计。在估计幅度时采用两步法,首先训练增强DNN对含噪语音做降噪处理,然后训练幅度分离DNN用以分离降噪后的混合信号幅度谱。在相位估计时,训练相位DNN来估测目标说话人的相位。最后,将分离后语音幅度谱特征与估计得到相位经由短时傅里叶逆变换重构语音信号。实验结果验证了所提算法的有效性。
其他文献
习近平在党的十九大报告中提出实施乡村振兴战略,打开了中国解决“三农”问题的新篇章。农村青年是农民群体中有文化、有理想、有力量的一部分,也是实施乡村振兴战略,建设农
<正>子莲适合于亚热带季风湿润气候生长,其生育期较长,要求的无霜期长,需要的积温比较高,我国长江流域及其以南地区多有栽培。在湖南湘北地区主要以鲜食莲子为主,效益较好。1
目的:1.了解新疆农牧区老年人群骨质疏松症的患病率情况。2.明确新疆农牧区老年男性中,RANK基因甲基化水平。3.揭示新疆农牧区老年男性中,RANK基因甲基化与老年男性骨质疏松症的联系。方法:2018年4月,采用三阶段随机抽样方法,以新疆农牧区60岁及以上的老年人群为研究对象开展流行病学调查。按照纳入标准,共有2000人纳入本研究,其中有1920人知情同意并参与本研究,应答率96.0%。按照剔除标
本次翻译素材选取英国教育学家温迪·罗宾逊的《教学的力量——通过实践学习》一书中第一、二、三章,该著作描述了英国教师教育和培训,以及实现有效教学的策略。翻译材料属于
融媒体时代,要维护好电视宣传的权威性和公信力,电视记者就必须要做到守正创新。守正是基础和前提,是一名记者最根本的职业操守;创新,就是要在内容、形式和自身能力上都要有
&#39;怀旧&#39;现象由来已久,渊源流长。远古人对祖先和神灵的祭祀,近现代发明的黑白照片、古典音乐等,几乎都是人类怀旧的特定表达方式。作为一种修复型的&#39;小写的怀旧&#
目的探讨子宫腺肉瘤伴肉瘤样过度生长的临床病理特征、免疫表型及鉴别诊断。方法分析4例子宫腺肉瘤伴肉瘤样过度生长的临床病理资料,行病理形态学观察及免疫组化En Vision法
[目的]探讨合并骶骨裂的腰椎椎弓峡部裂手术治疗原则。[方法]回顾性研究一组合并骶骨裂的腰椎椎弓峡部裂病人共26例,男性19例,女性7例;平均年龄23.2岁。所有病人均经过X线、CT、M
绝缘子是增加爬电距离的特殊绝缘控件,在输电线路中用来固定带电导体,确保导体与大地之间有足够的距离和绝缘性。但是,绝缘子长期在户外运行,会受到自然环境、工业烟尘以及汽
而自采气井口产出的天然气中含有一定量的CO2、H2S、水、固体颗粒等杂质,水蒸气在运输过程中容易形成水合物、液态水和酸性溶液,从而造成运输管道、阀门等部件堵塞、腐蚀,并