基于强化学习的睡眠监测信号特征选择方法的研究

来源 :延边大学 | 被引量 : 0次 | 上传用户:qq273683019
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着社会的发展,各方面的压力令人们睡眠质量逐年下降,患有睡眠疾病的患者越来越多,改善睡眠质量和治疗睡眠疾病已成为当今社会热点问题。睡眠分期是研究睡眠结构与治疗睡眠疾病的基础,而一组高效的特征更是睡眠分期的重中之重。有效的睡眠信号特征不仅能提升算法的性能,还能为后续决策提供依据,因此,睡眠信号的特征选择是一项重要的研究课题。现有端到端的深度学习模型相比于传统机器学习方法有良好的性能,但往往只关注于睡眠分期的结果,缺少对于特征的合理解释。强化学习算法的迭代反馈机制使得模型能够在模型训练的同时,记录每一步的动作,为结果的可解释性提供了依据。因此,本学位论文基于深度强化学习的策略,提出一种用于睡眠监测信号的特征选择模型,在提升睡眠分期效果的同时,有效定位信号中的关键特征。首先,对睡眠监测信号进行数据预处理。本学位论文采用了Bob Kemp收集的Sleep-EDF-39数据集中的Fpz-Cz极的脑电信号和水平眼电信号作为研究数据。一方面,通过数据标准化操作减少睡眠监测信号中特征变量的大幅度变化对模型的影响。另一方面,使用重叠滑窗的方式对监测信号进行划分,在保证时间依赖关系的同时构造特征的最小单元。将两种原始信号以最小单元交替融合和以整段标签为单位融合得出两种融合数据集,然后将两种融合数据集与脑电信号和眼电信号4个数据集进行实验比较。通过Resnet神经网络进行睡眠分期数据集选择实验,实验结果表明以向量为单位的融合信号效果最好。其次,构建基于深度强化学习的睡眠监测信号特征选择模型——睡眠数据蒸馏模型(Sleep Data Distilled Model,SD-Distilled),该模型解决了特征选取中常见的忽略关键连接特征问题。该模型一共分为三个部分:策略网络(Policy Network,PNet)、子集优化模型(Subset Optimization Model,SOM)和分类网络(Classification Network,CNet)。其中PNet采取随机策略对每个环境对应的动作进行抽取,为当前睡眠信号生成一个动作序列;SOM将动作序列转化为结构化表示;CNet基于SOM生成的结构化表示进行分类,并为PNet提供reward计算。SOM仅选择与任务相关的重要信号特征,该模型将特征选择问题转化为一个顺序决策问题,从而使用强化学习中的Policy Gradient方法解决特征选取的问题。最后,对策略网络中的动作选择序列进行整理与分析,提取动作操作,建立起动作与原始信号数据间的对应关系并进行特征筛选。同时,对筛选后的特征按照时间依赖关系进行整合,剔除短的数据特征序列,合并相邻特征。然后,将最终得到的数据特征进行分析并可视化展示。实验结果表明,睡眠分期的准确率为86.43%,相比其他模型睡眠分期效果均有提升。通过最终特征展示可知脑电信号在区分N1,N2,N3阶段比眼电信号更为有效,而眼电信号在区分NREM与REM阶段更为有效。本学位论文提出的模型可以识别出接近人工标注的睡眠信号特征,对后续研究治疗睡眠疾病有良好的辅助作用。
其他文献
7075是铝合金的一种常用合金,具有质轻、高强度、韧性好、结构紧密及耐腐蚀性强的优点,被广泛应用于航空航天精密零部件、汽车外形与重要部件制造等领域。7075铝合金在切削过程中,因高强度物理性质,导致加工过程中机床主轴振动异常、切削力大、粘刀、振刀、刀具磨损和加工表面质量不易保证等因素影响,为弥补7075铝加工工艺参数研究中的不足,对其进行工艺参数优化研究意义非凡。基于此,本文以7075铝合金数控铣
学位
随着互联网的普及和多媒体技术的发展,数字漫画作品逐渐占据了漫画产业的主流地位,盗版漫画作品随之出现。数字漫画作品的侵权行为主要体现于文本和图像两方面,然而目前并没有相关技术手段对数字漫画作品的文本侵权行为进行识别和认证。因此本学位论文在现有文本版权识别研究的基础上,提出了基于漫画人物语言特征的内部版权识别和外部版权识别方法。首先,针对漫画语料不足的问题,构建了漫画原语料与盗版漫画语料,并命名为MH
学位
近年来,我国多次出现上市公司因高溢价并购引发巨额商誉减值的暴雷事件,给公司乃至整个资本市场带来严重影响。并购重组作为公司重大事项,其结果很大程度上取决于高管决策,而不论是出于自利动机还是受限于专业程度,往往都会导致高管在决策时形成过高的商誉,进而诱发后续的商誉减值。因此,公司需要通过有效的治理机制,对管理层权利进行监督制衡。其中,董事会作为公司治理的核心,在负责战略谋划和决策制定的同时,也负责对高
学位
目前,对于我国的经济发展和保障民生来说,电力行业是必不可少的,近年来,我国出台了大量管理政策深刻地影响着整个电力系统。随着电力体制改革不断深化,能源产业向低碳化、清洁化、多元化转型的发展态势势不可挡,日益凸显,高质量发展也成为我国“十四五”时期各行各业发展特征的关键词,电力行业面临着经济社会发展和保障民生提出的更高要求和更高期望。本研究以LKHD发电公司的发展战略为研究主题。首先明确了 LKHD发
学位
随着互联网技术的发展以及各大视频平台的崛起,动画作品的影响力日益扩大。近年来中国的动画行业发展迅猛,动画产业链逐步形成。2021年国产动画的发行量、累计观看人数和观看时长再创新高。动画是一种综合的艺术表达方式,它涵盖了文学、音乐、绘画、电影等各个方面,制作难度非常高。一部好的动画作品通常能产生很大的经济价值。然而屡屡出现的侵权现象成为了影响我国动画行业健康发展的绊脚石。目前针对数字动画作品的版权保
学位
机器翻译是一项无需人工参与且可实现自动化翻译的自然语言处理任务,属于自然语言处理的重要研究领域。近年来移动互联网的迅速发展为机器翻译研究提供了广阔的应用空间。机器翻译方法也从早期基于规则与统计的机器翻译发展到如今依托神经网络模型端到端的方法。目前低资源语言的机器翻译在数据方面多是利用单语数据、辅助语言以及多模态数据改善翻译效果,在模型方面利用过参数化的模型提升神经机器翻译的性能。本学位论文针对神经
学位
目的:探讨早期肠内营养对大鼠脑缺血再灌注损伤后急性胃肠损伤及脑损伤的保护作用及其机制,为临床防治缺血性脑卒中及其并发的胃肠道并发症提供参考依据。方法:将32只健康SD雄性大鼠(清洁级,8周龄,体重250~300g)随机分为4组,正常对照组(Normal组)、假手术组(Sham-operated组)、急性脑缺血再灌注模型组(MCAO-model组)、早期肠内营养治疗组(EEN组),每组8只。Mode
学位
视频检索借鉴了图像检索的基本原理和技术取得了令人瞩目的研究成果,视频检索及其相关技术广泛应用于视频档案的管理、视频场景理解与查询等众多领域。视频标注作为搭建顶层应用的基础部分,涉及计算机视觉和自然语言处理两个不同的模态空间,通过融合不同的模态并挖掘两者时空上下文信息关系,实现时空帧序列到文本描述的准确映射,因此视频标注方法的研究可以促进视频检索技术的进一步发展,在学术和应用两个层面都具有重要和积极
学位
螺旋输送机作为土压平衡盾构机渣土输送系统的重要组成部分,具备较强的排渣能力,其螺旋叶片具有较高的强度和抗磨损能力,螺旋叶片结构与输送性能、功率损耗和抗磨损强度联系密切。本文采用离散元法,对不同叶型和匀变螺距的盾构螺旋输送机进行了仿真分析,研究了螺旋体结构对输送性能的影响,以及影响输送性能的主要因素,建立了螺旋输送机的参数优化设计模型,完成了优化设计并验证优化的有效性。论文主要研究内容如下:(1)对
学位
盾构机是专门用于隧道施工的一种重型装备,它具有掘进速度快、效率高等优势,逐渐成为隧道挖掘的主流方法。盾构机挖掘过程中,需按预先设计的轴线前进,但在具体施工期间,其难免受到司机操作水平、地质环境等因素的影响,这会导致盾构机偏离实际轨迹,引起偏差。如果不及时纠正,会影响工程质量,甚至造成整个工程的失败。依靠司机主观经验纠偏,这与其情绪状态、个人技能有关,有时会不可靠,所以需要发展智能辅助驾驶技术。近十
学位