基于脑电信号的跨被试情感识别方法研究

来源 :杭州电子科技大学 | 被引量 : 0次 | 上传用户:danfengtaoyang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
情感在人与人之间的互动中起着重要作用,在人机交互中也是如此。当机器能够感知到人类的情绪时,可以进行更具有个性化且具有针对性的交互,而情感识别是其中的一个关键技术。目前,脑电信号由于其高时间分辨率,已经被广泛应用于情感识别任务中。但现有大部分方法都是被试特定的,当已有模型应用在新的被试上时,其泛化效果差,极大阻碍了情感识别任务在实际场景中的应用。这是由于不同被试间的脑电信号差异巨大,已有模型很难适用于新被试。为解决该问题,本文提出了基于多分支网络和迁移学习的深度学习模型架构,并在SJTU Emotion EEG Dataset(SEED)上验证方法的有效性。本文主要包括以下工作:(1)基于脑电信号的频段与脑区差异探究多种数据组织形态对于深度学习模型性能的影响。在情感脑电信号分析中,不同的脑区以及不同的信号频段都包含着不同的信息,本文结合这两个因素以确定最优的数据形态进行后续实验。在单被试情感脑电信号识别任务中,最优形态相较于数据结构化之前的原始形态,其训练得到的模型平均识别准确率提升了13.80%。(2)针对任务态脑电信号的特性,重点考虑如何有效提取跨被试脑电信号的固有背景特征和任务意识特征。在已有的工作中,研究人员往往忽略了背景信息而一味地提取任务信息,导致了模型在跨被试情感脑电信号识别任务中的过拟合。本文提出了一种多分支网络模型并设计了标签正交化的训练策略以提取上述两种特征,从而提升了模型对于跨被试脑电信号的表征能力。在不使用新被试数据的前提下,多分支网络模型在跨被试情感脑电信号识别任务中达到了79.57%的平均识别准确率,高于目前已有文献中的最优模型性能。(3)针对跨被试脑电信号特征迁移中出现的子域分布偏移问题,提出了一种基于迁移学习算法的多子域对抗网络模型。该模型通过对抗训练对不同标签的子域特征分布差异进行建模,通过缩小类内距离和放大类间距离,从而进一步提高模型的跨被试情感脑电信号识别性能。此外,通过将多分支网络和多子域对抗网络进行有机融合,使得融合后的模型达到了87.94%的最优平均识别准确率。与目前已有的迁移学习算法相比,所提出的模型达到高识别性能的同时,在不同被试上表现得更加稳定。
其他文献
合成孔径雷达(Synthetic aperture radar,SAR)是一种能够对目标区域进行实时数据采集遥感成像雷达。SAR在恶劣条件下具有的高效率成像优势,使其被广泛的应用在灾情监测、地形绘制、资源勘探和军事侦察等方面。然而,在获取SAR图像的过程中,会形成一种干扰强烈的相干斑噪声,这种噪声往往含有少量的有用信息并且容易与小目标混淆,严重影响了图像的目视解译和后续的处理应用。然而,去噪后的S
在大数据和强劲的计算机算力加持下,人工智能技术得以迅速发展,其应用丰富了人们的生活。面对复杂多变的交通路况,为保障驾驶安全并提升驾驶体验,智能驾驶技术进入了人们的视野。作为智能驾驶技术不可或缺的一部分,开展对道路交通标志识别技术的研究具有重要意义。道路交通标志目标小且类型多样,同时在真实路况中存在标志牌被污染或被异物遮挡等场景,因此对于道路交通标志的识别任务很难通过传统识别算法实现。针对上述问题,
学位
随着物联网技术的不断发展,物联网应用采集的数据量越来越大,物联网应用正逐渐向边缘计算方向发展,对物联网应用功能的多样性提出了更高的要求,传统功能单一的物联网终端难以应对当前复杂的应用场景,同时物联网终端具有节点多,安装部署消耗人力物力大等特点。因此,物联网可重构技术越来越成为研究热点,通过自动选择通信协议,远程发送程序,复用原有的终端设备,根据物联网产品应用场景的变化,动态调整物联网应用功能。因此
大力提高能源利用率是我国实现“碳达峰”和“碳中和”目标的挑战难题。电力电子技术能大大提高电能的利用效率,是实现高效电能转换的关键技术。功率因数校正技术被引入以减少谐波电流对电网的污染,从而提高电网的供电质量。在当前的功率因数校正的研究中,如何实现变换器的高效率、高功率因数和高功率密度是当下研究的关键。本文分析并对比了当前功率因数校正技术中的优缺点,并从电路结构、开关器件和控制策略三个方面着手,结合
伴随着移动新媒体的发展,传统媒体的生存空间进一步被压缩,互联网信息技术在提升信息传播效率的同时,也为传统媒体带来了融媒体转型发展的新挑战。融媒体转型不仅是新技术的应用和原有渠道的拓展,从根本上也离不开新闻创作和传播思维的转变。电视节目策划必须要实现新的转型,通过加强新闻策划提高新闻节目的网络适应性,以实现新媒体环境下的信息传播和短视频新闻转型。本文结合新媒体环境下电视节目策划存在的问题,探索如何提
SAR图像变化检测是通过对某一地域或物体的多时相SAR图像进行处理,然后评估目标是否发生变化并提取变化特征的技术。由于SAR发射的电磁波无需光源,可无畸变穿透云雾水汽,不受光照、温度等复杂气候影响,SAR可在任意气候下工作,这使通过SAR系统获得的SAR图像顺理成章变成变化检测的核心数据,并被大规模应用。随着技术的逐渐成熟,SAR图像变化检测已在农田规划、自然灾害检测、地理勘察、水域监测及军事侦察
生物视觉的感知能力具有极其精确和高效的性能,因而成为神经科学和计算机视觉领域研究的热点。生物视觉感知作用中,复杂的视觉神经机理是视觉系统高效运转的关键因素,因此探索其中的视觉机制对进一步深入理解视觉感知具有重要意义。本文受此启发,重点研究生物视觉系统中,前端视通路有关神经结构如视网膜、外膝体、初级视皮层和上丘,以及在经典感受野和非经典感受野之间的神经编码机制,还有神经元的脉冲放电机制,并依此构建视
在研究多智能体系统的相关控制问题时,一致性控制算法因其在无人机、智能机器人编队等的实际应用价值而受到了广泛关注。然而,在实际控制系统中,执行器故障、拓扑结构切换和时滞的存在均会降低闭环系统的性能。为了在有效降低各类因素对系统影响的同时保证系统的稳定性,本文针对Markov跳变多智能体系统,利用容错控制理论、Lyapunov稳定性理论、代数图论等方法开展基于观测器的容错控制方法研究。主要研究内容如下
在体外构建具有生物活性的三维多细胞体系是细胞3D打印的前提及关键环节。三维多细胞体系经培养繁殖达到组织再生、器官修复的目的,对生命科学和生物医药的发展意义重大。针对现有细胞3D打印使用生物支架或支撑带来的在细胞密度、细胞间通信、支架降解率、可打印性和生物相容性等方面的问题,本文提出了基于超声阵列声压微势阱非接触操控细胞构建细胞三维体系的方法。研究阵列声压微势阱细胞的操纵方法,引入细胞的脉冲微输送技