基于深度强化学习的运维行为审计研究

来源 :华北电力大学(北京) | 被引量 : 0次 | 上传用户:yingzizhang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
运维审计系统保证了运维人员对企业信息系统的运维管控,但系统只是将运维全过程进行了日志记录,运维安全审计工作还需要审计人员通过人工方式对运维过程和运维日志进行核查,异常行为无法被及时发现。因此,急需实现运维安全审计智能化、自动化。本文为实现运维行为智能化管控,具体研究内容体现在以下四个方面:(1)针对运维审计系统下多个类别的网络运维协议,进行了运维日志记录流程研究、格式分析和基于存储结构的日志分类;(2)构建了多个协议的运维日志数据集,完成了对运维日志的特征向量构建,在多维度下实现对运维命令的表征;(3)研究了深度强化学习(Deep Reinforcement Learning,DRL)实现行为决策的关键技术,在对运维日志格式分析和特征向量构建的前提下,建立了基于DRL的运维行为审计模型;(4)设计了基于运维日志数据集的环境状态空间、动作空间,搭建了运维检测环境,并以深度Q网络(Deep Q Network,DQN)为算法基础构建运维行为审计模型进行训练,实验证明该模型能够完成对运维异常行为的有效管控。在上述研究基础上,设计了运维审计系统下的智能审计模块集成方案,完善了运维审计系统的智能审计功能,提升了审计效率,并提高了运维监管的安全性。
其他文献
根据中国互联网络信息中心(2020)发布的《2019年全国未成年人互联网使用情况研究报告》,2019年我国未成年网民的规模为1.75亿,青少年网上主要娱乐活动为听音乐和玩游戏。青少年使用网络游戏的现象已经越来越常见,青少年网络游戏成瘾问题已经成为世界关注的心理健康问题。青少年时期是社交需求快速发展的时期。网络游戏中的社交具有匿名性、低物理感知性等特点,因此更能在社交过程中给人带来安全感,也可以让人
学位
级联三电平中点钳位型换流器(cascaded neutral point clamped three-level converter,CNPC)相较于模块化多电平换流器(modular multilevel converter,MMC)、阀开关器件串联等拓扑结构,更加适用于小容量、中低电压的微网直流输电、海岛直流输电、边防哨所等应用场景。然而,由于级联三电平换流器这种特殊的拓扑结构存在着一些新的运
学位
学校体育与社区体育融合发展能够充分调动社会力量参与学校体育,促进学校体育社会化,培养儿童青少年终身体育习惯。学校有大量的体育专业人才和场地设施开放给社区使用,可解决社区体育供需不足等问题,满足不同人群的体育需要,提高社区公共体育服务质量。然而由于我国教育部门和体育部门还没有建立完善的跨部门协同治理机制,体育社会组织发展缓慢、类型单一,市场组织缺失等问题,制约着多元主体参与学校体育与社区体育融合发展
学位
互联网与通信技术的不断发展给社会生活带来了深刻的影响,以网络直播为代表的新兴交互型媒体改变了人们的生活习惯和精神文化需求。直播行业自2016年正式开始大规模发展以来,经历了从红海到行业洗牌再到如今大资本控场局面的历程。网络直播的迅猛发展引起学术界对其的高度重视,学者们围绕网络直播展开了广泛的讨论。目前来看,关于网络直播的研究大多聚焦于宏观层面,对网络直播中的用户及其行为的研究普遍不足,对用户持续使
学位
新冠肺炎疫情的全球爆发,再次为人们敲响了健康防护的警钟,也更加深刻地诠释了建立健全高等医学教育人才培养体系的现实性和重要性。高等医学教育肩负着健康与民生两大工程,是国民教育体系的重要组成部分。作为卫生和医学教育大省,S省多年来始终坚持把人民健康放在首位,优先发展。但是,随着人民生活水平日益提高以及经济社会持续发展,健康模式也由传统的重疾病治疗向注重预防转变,人民群众对健康需求也随之日渐增长,进而提
学位
随着人类科学不断进步,社会经济水平逐渐提高,各国汽车行业生产规模随之不断扩大。电动汽车作为电力驱动的交通工具,因其既可以实现碳减排又可以大幅度降低出行成本,深受广大用户喜爱。但是无序充电行为会引起电网侧出现负荷过载、电能品质下降等问题,同时加大电网运行调控难度。为了消除无序充电造成的不良影响,本文提出了电价引导和分层式控制两种有序充电方法。首先,提出了充电负荷的神经网络预测方法,利用灰色关联贴近度
学位
上个世纪70年代末,随着中国大陆改革开放以及中美关系的正常化,大陆对台政策发生根本性地改变,由原来的“解放台湾”转向“和平统一台湾”。1979年元旦日全国人大常委会发布《告台湾同胞书》,即宣示这一改变的到来。两岸政治关系的缓和以及中美学术开始交流,为两岸学术互动与来往提供了可能性。改革开放初期,大陆上马《中华民国史》国家学术工程初见成效,此消息经旅美学者传至台湾,继而引发岛内近代史学界的强烈反应,
学位
在当今“节能减排”的大环境下,各行各业都在奋力整改从而探求一条可持续发展的道路。对于铁路行业而言,其不断壮大的规模带来了巨大的能源消耗和电力成本,这就迫使铁路公司寻找一条节能减排的新路径。当下,光伏发电技术发展成熟,将光伏发电作为铁路运输所需电能的重要来源,是实现铁路行业节能减排的新举措。光伏发电出力集中于有光照的条件下,所以现有的研究集中于对货运列车运行时刻表进行调整优化,使得货运列车的运行尽可
学位
为贯彻落实习总书记提出的“碳中和、碳达标”目标,更好地发挥能源网络和负荷存量的集成作用,需要大力推行发展低碳清洁能源、加强完善能源体系、维护电力系统稳定运行。随着世界能源结构的转型,越来越多分布式新能源接入电网,为了进一步提高新型电力系统运行与控制的灵活性,实现从传统的“源”跟随“荷”,到现代的“荷”跟随“源”的调度模式,研究需求侧资源灵活性预测与优化调度方法,是新型电力系统发展的重大需求,也是实
学位
近年来互联网行业和移动信息网络日臻成熟,不断发展和完善,各种各样的互联网企业不断涌现出来。目前互联网的主要收入来源有:网络销售收入、增值服务收入、广告收入和其他收入。这其中增值服务收入指通过消费者购买增值服务等获取的收入。互联网行业的增值服务主要出现在网络游戏和一些网络平台软件上,指在网络社区、社交软件等平台上,通过网络用户与用户之间的沟通互动,激发用户表现自我、展示个性及娱乐的需求,并依此给个人
学位