基于深度强化学习的老年健康数据挖掘及应用研究

来源 :太原理工大学 | 被引量 : 0次 | 上传用户:simba_m
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
由于计划生育人口政策以及生活成本增高的影响,我国人口出生率下降,社会老龄化趋势日趋严重。与此同时,老年人随着年龄增长身体健康状况令人堪忧、社会医疗资源供给不足、家庭结构转换,造成巨大的社会养老压力。中医脉诊是收集病情、判断疾病的重要方式之一,可以对老年人的身体状况进行相对全面的评估。利用目前获取的老年人脉象数据,依据中医脉诊理论知识,本研究提出马尔可夫决策过程和蒙特卡罗搜索相结合搭建一个脉象识别模型,对老年人的身体健康状况进行客观评估。本研究将收集到的数据直接用于训练现有的一些基础模型,发现在脉象识别实验中表现为准确率相对较低、经验轨迹冗余较大、结果易出现雷同等问题。因此进一步提出两种对基础模型进行中医脉象的适应性改善:首先,本研究提出优化强化学习路径特征分类的脉象识别法。是在以马尔可夫决策过程与蒙特卡罗搜索相结合的基础模型上,添加特征选择机制和脉象分类的部分。具体的实现方法,先对脉象数据与正常数据(平脉象)进行Z-Score特征选择,剔除一些正常数据,留下异常数据,达到缩短经验轨迹长度、降低冗余度的目标。其后根据中医脉象对异常特征的分类方法,对脉象数据进行分类、分别确定相应的初始状态,并进行马尔可夫决策过程和蒙特卡罗搜索的模型测试,生成相应的经验轨迹并解析出相应的状态值。在此基础上,进一步得出最优策略,更新状态转换概率、状态阈值集;其次,在前述研究的基础上,本研究还提出了第二种改进方法:优化适应脉象识别的马尔可夫决策与蒙特卡罗搜索算法。主要通过对马尔可夫决策过程和蒙特卡罗搜索算法进行中医脉象适应性改善。与上一种研究方法不同的是,本方案不会对脉象数据进行特征选择,只进行脉象分类,初始化相应的状态。另外,对马尔可夫决策过程的状态概率更新方式进行适应性定义;对蒙特卡罗搜索中奖励进行公式计算参数进行适应于脉象诊断的选择,限定其只考虑较近的几个时间步状态下的奖励值;对蒙特卡罗搜索中的奖励公示计算公式进行适应性修改,并修改为阈值集的形式。通过实验验证表明:两种不同的适应脉象识别性的改善模型,分别对单一脉象数据进行了测试实验都表现出良好效果。在第二种模型中,还对相兼脉象进行了测试实验说明其可以应用到相兼脉象的识别。本提案可缩减训练时间和资源,并可保留完整的经验轨迹,在提高脉象识别的准确率的同时,还可解决处理过程中的“黑箱”问题。
其他文献
本文讨论两个模糊图直积的性质,主要对模糊图直积中的模糊圈进行了较为详细的研究.首先,我们对模糊图中的内点及模糊图直积中的模糊圈这两者的关系进行研究,给出了两个模糊图直积中有模糊圈的充分条件.通过我们的讨论,证明了两个有内点的模糊图的直积中必有模糊圈,而两个无内点的模糊图的直积中必无模糊圈.其次,我们对一些特殊的模糊图直积展开了研究,依据作直积的模糊图中有圈和无圈的情况,分为无圈与无圈、有圈与有圈、
血栓栓塞性疾病严重威胁人类生命和健康,溶栓治疗是血栓性疾病安全有效的治疗手段。目前临床使用的溶栓药物疗效肯定,但还存在许多缺陷,而且价格昂贵。因此研制高效、快速、副作用小,价廉的新型溶栓药物成为当前的迫切需求。本试验构建了华根霉全长cDNA文库,并从中筛选出一种根霉纤溶酶基因;通过其在毕赤酵母中的表达,对该酶的酶学性质进行了初步的研究。通过SMART (Switching Mechanism At
目前,临床上广泛应用的生物医用材料有:不锈钢、钴基合金、钛及钛合金以及Ni-Ti合金等,在使用过程中这些材料存在明显的弊端,使得寻找更加适用于人体的金属替代材料,成为医学界和科学界的研究方向。镁及镁合金作为一种新型的生物医用材料,其具有与人骨相似的弹性模量、对人体无毒无害、生物相容性以及生物可降解性好等特点,受到医学界和科学界的广泛关注。由于镁及镁合金弹性模量较高、屈服强度较低,使其在生物医用材料
积分微分方程是现代数学的一项重要分支,是人们解决各种实际问题的有效工具,它广泛应用于几何、力学、生命科学等领域.随着分数阶微积分的发展以及实际生活中一些不可忽略的随机因素,随机分数阶积分微分方程出现在种群动态、信号处理等统计学领域.当前已有许多学者研究了该类方程解的适定性;并且由于实际工作中很难获得该类模型的精确解,因此求解该类方程的数值方法以及相关性质也在研究当中.而分数阶导数的弱奇异性和随机噪
近年来,GaN基绿光激光二极管的光电性能取得了很大的改善,在激光打印、激光测量、激光显示、激光照明以及通信等领域有着重要的应用。虽然在光电性能和应用方面取得了一定进展,但是GaN基绿光激光二极管仍存在影响其光电性能的关键问题。研究发现,激光二极管外延层间的电子泄漏严重、空穴注入效率低;因此,通过设计外延结构来减少电子泄漏、提高注入效率和光学限制因子对光电性能提升至关重要。本论文研究了GaN基绿光激
随着通信技术和计算机技术的不断发展,人们对高数据率数字通信等领域所采用的编码技术的要求越来越高.由于信号在信道传输取过程中会受到干扰而产生失真,所以在编码理论中希望找到一个尽可能大的二进制代码集,对于给定大小的二进制字,它可以纠正一定数量的错误.A(n,d)是所有码字间最小Hamming距离为d的n维最大码集的值.A(n,d,w)是所有码字的码重为w,并且满足最小Hamming距离为d的n维最大码
位于吕梁山中段东麓的西冶川流域,岩石类型齐全、地层较为连续、构造现象多样、地貌类型丰富,是研究流域地貌特征的良好场所。在实地调查的基础上,基于DEM,运用Arc GIS软件,提取了河流长度、流域面积、河谷平均宽度、水系分支比、支流间平均宽度、河流弯曲度、流域高程、河流纵比降、流域坡度、流域起伏度、流域面积高程积分、河流纵剖面及凹度、Hack剖面与河长坡降指标、河道陡峭指数等地貌参数以获得对西冶川流
目的:随着我国老龄化社会现象日益加重,越来越多的患有高血压、糖尿病等基础疾病以及接受抗栓治疗的高龄患者开始接受外科手术的治疗,成为了围术期脑卒中发生的高危群体。栓塞是目前被认作为脑卒中发生的关键环节,各种原因引起的手术患者的高凝状态是围术期血栓形成阻塞脑血管的重要原因之一。建立凝血功能与围术期脑卒中之间的关联,将对预警患者围术期脑卒中的发生具有重要临床价值。血栓弹力图(Thrombelastogr
现在越来越多的工业生产过程由工业控制系统进行控制,工业控制系统为工业生产提供便利的同时也带来了很大的安全隐患。越来越多的研究表明使用人工智能技术构建基于网络流量的入侵检测系统可以有效的保护工业控制系统。但是使用人工智能技术构建基于网络流量的工控入侵检测系统需要大量的带有标签的工控攻击流量数据,然而实际中却没有足够的带有标签的工控攻击流量数据用来构建基于网络流量的工控入侵检测系统,导致构建工控入侵检
饮用水安全一直是社会关注的热点,特别是微生物污染引起的安全问题。该问题的应对方法主要有两种,一是高温灭菌,二是化学消毒;前者高能耗、高成本、设备体积大,后者存在“二次污染”的风险。安全、高效,价格低廉的灭菌技术是研究和发展的重要方向之一。固载化灭菌技术是将具有抑菌功能的杀菌基团固载于不可溶性载体的一种灭菌方法,实现了常温灭菌,低残留、低能耗。本文在综述固定化杀菌剂常用功能基配体类型及树形大分子的研