生理信号的情感计算研究及其应用

来源 :北京工业大学 | 被引量 : 7次 | 上传用户:bob01109
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
情感是人类的一种复杂心理和生理现象,情感渗透进了人类生存和生活的方方面面,通过生理信号进行情感计算的研究目的是为了通过对生理信号进行分析从而识别人们的情感状态。本文的主要创新点可以概括为以下几个方面:(1)用希尔伯特黄变换方法提取脑电信号时频域特征,随后通过高斯核函数支持向量机方法对特征进行情感分类识别研究。具体的过程是,首先我们用经验模态分解法对原始脑电信号进行分解,随后对本征模函数按照不同的时长进行时间窗口划分,随后提取窗口内信号的功率谱作为生理特征。在对生理特征进行情感分类阶段,用高斯核函数支持向量机的方法进行分类识别。将此方法用在DEAP数据集上进行验证发现,我们的方法对应的情感分类精度比之前的研究和其它基线方法的分类精确度更高。同时,对不同个体被试的情感分类结果进行对比分析发现不同被试对于相同的刺激产生的情感是有差别的;同时,通过对同一被试不同频段脑电信号对应的情感分类精确度进行对比分析发现,在清醒状态下,被试脑电信号高频率子波提取出的生理特征对应的情感分类准确度比低频子波对应的分类精确度更高。(2)提出了脑电信号多维度特征的平面融合方法,以及相对应的平面特征提取方法和情感分类识别方法。脑电信号的多维度特征包括频域维度特征、空间维度特征和时间维度特征。脑电多维度特征平面融合方法包含三个步骤:第一步,提取不同时间窗口内脑电信号在不同测试电极的频域特征;第二步,通过我们提出的映射方法,将频域特征按照脑电电极空间分布规律映射成一个二维图片;第三步,根据时间窗口的先后顺序将生成的二维图片进行排列,从而形成一个图片序列来表现脑电信号在不同刺激状态下的特征。脑电多维度特征的提取方法采用了深度卷积神经网络进行特征的自动提取,提取出的特征通过LSTM循环神经网络进行情感分类识别。文中将深度卷积神经网络和LSTM循环神经网络进行融合,形成了一个混合深度神经网络。模型验证阶段采用DEAP数据集作为训练集、测试集和验证集进行训练。为了增加训练样本,我们采用了向原有图像训练集添加噪声的方法将原有的图像集进行了扩展。通过对比情感识别精确度,结果说明本文提出的方法有效。对于实验结果的分析发现,以3秒钟为时长窗口生成的脑电特征序列对应了较高的情感分类准确率;其次,脑电特征帧中FP1点和FP2点的细节变化对于整个情感分类准确率的影响较大。(3)对于通过多模态生理信号进行情感识别的研究,本文提出了一种用栈式自编码神经网络的方法对多模态生理特征进行信息融合和信息压缩。在特征融合阶段,首先提取不同模态生理信号的频域特征作为原始生理特征,随后对不同模态的特征进行拼接,对拼接后的特征通过栈式自编码神经网络进行信息压缩和特征融合;对融合特征本文采用LSTM循环神经网络对其进行情感分类识别。结果发现,多模态融合特征的对应的情感分类识别准确率比单模态特征情感分类识别准确率要高。说明通过多模态生理特征融合方法得到了更加丰富的情感分类特征,特征融合的方法是有效的。(4)本文设计了一个基于可穿戴脑电采集设备和智能移动设备的脑电信号采集系统,主要的功能是用来记录被试长周期实验过程中的脑电信号和POMS量表。随后,将脑电信号的相关特征与POMS量表的相关指标进行关联分析,以期发现人们在无刺激状态下通过脑电信号反映出来的精神变化。实验一共采集了8个被试7天的静息态脑电信号,通过关联分析得到脑电特征与POMS量表分量之间的Pearson相关系数。实验结果表明前额叶FP1位置点的脑电信号与POMS情绪状态量表的情绪分量之间存在显著相关关系。例如,愤怒分量与脑电特征之间呈现出了显著正相关的关系,自我分量有4个出现显著的负相关,而其它的分量并没有出现显著相关。
其他文献
审美观念是审美文化和美学学科中的重要理论范畴。本文从理论上深入论述了审美观念的涵义、本质、表现形态、功能作用以及它在审美系统和人类文化中所处的位置,进一步说明了研
劳动者因第三人的侵权行为受到伤害,该伤害又同时被认定为工伤的,会产生工伤补偿请求权与第三人侵权损害赔偿请求权的竞合。对如何处理该竞合关系,《工伤保险条例》未作出规定,《
“辉县人民干得好”在上世纪六七十年代享誉神州大地,它集中体现了辉县人民战天斗地、实干创业、“敢叫日月换新天”的精神风貌。这种精神穿越时空,历久弥新,历久弥坚,在新的形势
报纸
<正> 心阴虚口疮孙××,女,41岁,工人。 1981年7月4日初诊:舌尖糜烂年余,时轻时重,口燥咽干,舌体有疼痛灼热感,伴有胸中烦热,失眠多梦,手心发热,脉细数。检查:舌尖部见四个小
期刊
自《明室》1979年出版以来,关于《明室》与摄影界"圣经"《论摄影》的比较就从未停止。如果说苏珊·桑塔格在阐述自己对影像文化的见解时是一个冷静而理性的旁观者,那么罗兰·
研究了不同浓度Cd(镉)溶液对黄菖蒲(Iris pseudacorusL.)种子萌发和幼根生长的影响。结果表明:在10 mg&#183;L^-1低浓度Cd胁迫下,黄菖蒲种子发芽势为60.8%,明显低于对照(P〈0.05),但
一个地方发展快不快、好不好,关键看项目,出路在招商。市委书记李谦在全市重点项目建设观摩拉练会议上指出,要强化“三项举措”,不断开创招商引资工作新局面。这充分说明招商引资
报纸
医院财务报告是会计核算工作的总结,是医院主管部门和财政部门以及其他报表使用者了解医院财务状况和运营业绩的主要来源,通过医院的财务报告可了解医院的经营状况,进一步解
文章介绍王灵台教授治疗肝病的经验。王教授认为慢性肝病的主要病机是气血阴阳失调,邪毒久滞。治疗思路在于阴阳同调、气血并治、脏腑经络兼顾。目前,王教授多以“肝八味”变
在我国高校的发展过程中,高校为了实现教学质量的整体提高,开始加强专业课教师的外聘工作。由于专业课外聘教师本身拥有扎实的专业基础,并且教学经验极为丰富,所以成为了高校