告警日志解析与时序事件关联分析研究

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:jovkin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
智能运维已经成为IT运维领域的热点趋势。智能运维中的根因分析在发现系统故障方面扮演着重要的角色,针对运维数据的日志解析和安全事件关联分析在根因分析中一直是重点研究内容。现有解析器研究中,LenMa解析器因为具有在线实时运行、无需预处理、开源等优点,受到广泛应用,但其在HealthAPP.log数据集上的表现较差;同时,现有研究解决了突增式时序数据与事件序列的相关关系检测问题,但针对新型的缓增型和周期型时序数据与事件序列的相关关系检测问题,还没有解决方案。为了解决上述问题,本文首先从分析LenMa解析器性能表现的原因入手,给出了一种LenMa改进算法,接着在时序序列和事件序列关联分析方面,分别提出了两种新型时序序列与事件序列相关关系的检测算法。具体工作如下:1.通过单变量实验找出了LenMa在HealthAPP.log数据集上的较差表现的原因,并基于此原因提出了 LenMa的改进算法。改进后的LenMa算法通过预检算法防止LenMa运行时出现性能骤降问题,通过日志字段替换算法来解决相同类型日志无法聚类的问题。经过实验,LenMa改进算法在该特定类型数据集上的准确率从17.4%提升至98%,同时不影响在其他数据集上的表现。2.提出了缓增式时序序列与事件序列的相关关系检测算法。首先讨论了缓增式时序序列的广泛存在,然后针对这种缓增式时序序列的新场景提出了相关关系检测算法,算法通过基于斜率统计的算法检测时序序列的缓增性,通过以滑动窗口探测的方式来进行相关关系关联分析。最后通过实验观测算法中的滑动窗口大小K以及判断阈值Tr对算法产生的影响。根据实验结果,本文所提出的缓增式时间序列和事件序列相关关系检测算法,在真实的运维场景中,能有效检出周期性相关关系,算法的F1值为98%,为缓增式相关关系的检测问题提供了可靠的解决方案。3.提出了周期式时序序列与事件序列的相关关系检测算法。首先分析了针对周期性时间序列无法应用在传统的MTSKNN算法上的原因,然后针对这种周期性时序序列的新场景提出了相关关系检测算法,算法应用周期性时序序列检测算法进行关联分析,并通过离散傅里叶频域变换来计算周期,最后通过异常检测来输出可能性最高的周期值。根据实验结果,提出的周期性时间序列和事件序列相关关系检测算法,相比于传统的MTSKNN算法,能够有效检测出周期性时序序列和事件序列相关关系。算法能够有效检测出周期性相关关系,F1值为100%,算法输出的周期值的均方差仅为0.011。
其他文献
乡村振兴目标是实现农村农业现代化,最终目的是要造福当地农民,缩小城乡差距,实现共同富裕,因此乡村振兴的主体是农民,只有农民积极参与,乡村振兴战略才能行稳致远。新疆农民是新疆社会稳定和长治久安的重要基石,也是参与乡村振兴最重要的主体力量。从五大振兴来看,新疆农民是乡村产业振兴的主力军,是乡村生态振兴最重要的践行者和受惠者,是乡村人才振兴重要力量,是乡村文化振兴的塑造者与传承者,是乡村组织振兴的重要合
期刊
本研究以《义务教育数学课程标准(2011年版)》和《义务教育数学课程标准(2022年版)》为对象,分析“数学实质”与“数学本质”语词的使用语境、频次变化,探析数学本质的多层次内涵和多元化表达。研究发现,《2022版数学课标》突出数学本质,呈现三方面变化:一是追本求源,阐明了数学本质内涵;二是把握学科特征,揭示了数学多元本质;三是细化了数学本质阐述,建立了数学内容与核心素养的结构关联。研究为教学实践
期刊
为了探究宁夏5个地级市乡村振兴、新型城镇化与生态环境耦合协调状况、地区差异和变化趋势,本文通过构建乡村振兴、新型城镇化与生态环境发展水平评价体系,使用熵值法对2010—2021年5个地级市新型城镇化、乡村振兴与生态环境发展水平进行测度分析,并构建耦合协调度模型对3个系统耦合协调关系进行探讨。分析结果表明:宁夏乡村振兴、新型城镇化与生态环境发展水平逐年上升,耦合协调水平整体呈增长态势,同时5个地级市
期刊
本论文针对初中写作教学中存在的问题,基于陶行知“生活教育”思想的相关研究,提出了生活化作文教学实施策略。本文主要由绪论、主体及结论部分组成。绪论部分对本课题的选题缘由、研究意义、研究现状进行了总结分析,并提出了相应的研究方法。主体部分一共分为四章。第一章介绍了陶行知“生活教育”思想的内涵,对生活化作文教学的相关概念进行了界定,并阐述了陶行知教育思想对生活化作文教学的理论指导意义。第二章以问卷调查的
学位
<正>用科学发展的眼光来看,如果说优秀公民群体是未来民主理性社会的脊梁,那么批判性思维则是优秀公民素质的核心部分,理当是现今中国教育发展的理想目标。照此说来,在我们的历史课堂教学中,教师应该如何培养学生的批判性思维呢?发展批判性思维首先要养成批判性思维倾向,没有批判性思维倾向,批判性思维能力就是空中楼阁。批判性思维倾向的形成源于对自我固有观念的批判,自我封闭、自我观念的固化是发展批判性思维的最大障
期刊
【目的】针对C+L波段大容量超长跨距传输系统复杂实现难度大的问题,文章设计了一种同时放大C和L波段的远程增益单元(RGU)。【方法】通过研究掺铒光纤对光信号放大的理论,得出掺铒光纤长度与RGU的增益以及噪声系数的关系。再通过模拟仿真,比较不同设计方案下RGU的增益与噪声系数,选出RGU中C和L波段最佳的铒纤长度,并通过优化光路子系统参数,设计出基于远程光泵放大器(ROPA)系统实际应用场景下性能最
期刊
目的:设计开发基于实时电流监测的医疗设备故障识别系统,监测设备运行电流数据,通过数据对比分析实现医疗设备故障识别。方法:分析医疗设备电流信号特征,使用规则推理故障识别技术,建立基于电流信号特征值数据的故障综合数据库;采用浏览器与服务器(B/S)架构,前端采用Vue渐进式框架开发,后台服务器采用CentOS 8操作系统开发,使用Python编程语言以及MySQL数据库;采用高精度交流变送器、单片机和
期刊
目的:探讨蠕动泵推注肿胀液对下肢静脉曲张病人行大隐静脉射频消融术后护理及康复效果的影响。方法:回顾性分析2019年11月—2020年10月在太原市中心医院接受大隐静脉射频消融术的80例病人临床资料,根据不同的手术方式将病人分为人工推注组(40例,52条患肢)和蠕动泵组(40例,53条患肢)。比较围术期两组病人患侧肢体疼痛评分、手术相关指标及皮下血肿发生情况。结果:围术期两组病人均获得随访,无失访病
期刊
随着国家“双创”政策的普及和推广,创新创业教育的发展伴随着高等教育不断深化改革,高校创新创业教育的规模不断扩大,开展的形式也愈发多元化。在“大思政”背景下,如何完善和提高创新创业教育的发展成为了重点和难点。本文通过梳理当前创新创业教育的发展现状和背景,对创新创业教育与思想政治教育两者关系进行深入分析,找出在“大思政”背景下创新创业教育过程中存在的问题,通过相关制度的完善、创新创业师资团队建设、拓展
期刊
理论和实验确定了C+L波段超宽谱掺铒光纤光源的双级双程结构,通过优化铒纤长度和泵浦功率使光谱宽度达到最优。研究结果表明在掺铒光纤A长度为30.5m,掺铒光纤B长度为1.7m,泵浦激光A驱动电流145m A,泵浦激光B驱动电流110mA时输出ASE光谱宽度75nm左右,光功率9mW左右。掺铒光纤光源的超宽谱满足高精度光纤陀螺要求。
会议