基于语音信号与心电信号的多模态情感识别

来源 :东南大学学报(自然科学版) | 被引量 : 0次 | 上传用户:feiyang187
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
通过采集与分析语音信号和心电信号,研究了相应的情感特征与融合算法.首先,通过噪声刺激和观看影视片段的方式分别诱发烦躁情感和喜悦情感,并采集了相应情感状态下的语音信号和心电信号.然后,提取韵律、音质特征和心率变异性特征分别作为语音信号和心电信号的情感特征.最后,利用加权融合和特征空间变换的方法分别对判决层和特征层进行融合,并比较了这2种融合算法在语音信号与心电信号融合情感识别中的性能.实验结果表明:在相同测试条件下,基于心电信号和基于语音信号的单模态情感分类器获得的平均识别率分别为71%和80%;通过特征层融合,多模态分类器的识别率则达到90%以上;特征层融合算法的平均识别率高于判决层融合算法.因此,依据语音信号、心电信号等不同来源的情感特征可以构建出可靠的情感识别系统.
其他文献
<正>诗歌是诗人借助诗歌形象即意象用高度凝练的语言来表情达意的一种文学作品。形象是诗歌思想内容和作者情感态度的载体,因此准确理解诗歌中的形象,就可读懂诗歌,把握诗人
运用霍米&#183;巴巴的后殖民理论分析海明威小说《乞力马扎罗的雪》中殖民主体、被殖民主体的矛盾身份焦虑问题,继而考察小说中被殖民主体从“失语”到“发声”的表达历程,探
我国1997年刑法修订时,尚未大量出现黑社会性质组织犯罪。当时,立法者将黑社会性质组织犯罪明确规定在刑法第二百九十四条,表现出了刑事立法的一定超前性。随着社会发展,特别
目的通过在老年全髋关节置换术中分别运用不同的临床麻醉方法,进行临床疗效观察和比较,探索最优麻醉方法。方法将在我院进行全髋关节置换术治疗的老年患者分两组,麻醉方法分
该研究的目标是不同的热处理工艺的效果比较;同时还探讨了是否能够通过分析的方法来分辨出不同工艺所生产的不同种类的牛奶。研究证实,超高温灭菌乳的风味不如新鲜的巴氏杀菌
黑社会性质组织犯罪在我国逐渐抬头且呈蔓延之势,已经成为严重危害社会秩序和政权稳定的一大隐患。虽然刑法规定了“反黑三罪”,填补了旧刑法的一项空白,但是由于当时缺乏理
<正>随着时代的变迁与发展,传统的语文教学方式已经不适合当前的学生综合能力培养的目标。而新课程标准改革正是在这种背景下应运而生,《新课程标准》更加注重教学方式的创新
产业结构软化是近些年发达国家实现产业结构调整升级的重要战略.本文从产业结构软化的相关理论及实践分析入手,在对产业软化的推动力进行论述的基础上,分析西北地区产业结构
近年来,随着大数据挖掘技术在水利行业中的迅速推广以及水库健康管理理念逐渐兴起,水库健康管理平台积累了海量的水库健康监测数据,海量数据是建立水库智能综合健康诊断模型、实现水库健康状况预警,优化调度等工作的重要基础。而水库健康管理平台在长期的数据采集与存储过程中,网络波动、传感器故障、人为操作失误等原因导致了水库健康监测数据的缺失值和异常值,这些缺失值和异常值严重降低了监测数据的真实性。不仅影响了水库
瑞典的冰雪旅馆在瑞典北部北极圈以北140公里的著名旅游城市、滑雪胜地基律纳市附近,有个叫尤卡斯耶尔维的小镇,那里每年冬天都要造一座冰雪旅馆。别看旅馆里寒气袭人,却吸引无
期刊