【摘 要】
:
随着大数据技术的飞速发展,网络规模也较过去几何级数增长,IT运维系统高效快速的处理也逐渐成为热点。同时,由于机器学习技术的普及。将各种机器学习方法与运维技术结合,形成人工智能运维AIOps(Artifical Intelligence Operations)技术。在这一背景下,本文以实际某商业银行的KPI数据,研究了KPI(关键性能指标Key Performance Indicator)概念漂移检
论文部分内容阅读
随着大数据技术的飞速发展,网络规模也较过去几何级数增长,IT运维系统高效快速的处理也逐渐成为热点。同时,由于机器学习技术的普及。将各种机器学习方法与运维技术结合,形成人工智能运维AIOps(Artifical Intelligence Operations)技术。在这一背景下,本文以实际某商业银行的KPI数据,研究了KPI(关键性能指标Key Performance Indicator)概念漂移检测和基于相似度的关联性分析问题。本文的主要工作如下:1.介绍AIOps的发展历程,重点介绍针对运维数据的概念漂移测和关联性分析的研究现状。并由此阐述该相关研究的重要意义。2.提出综合法来进行概念漂移检测,概念漂移是指运维数据的分布发生了显著变化。一般的异常值检测算法由于依靠采集一段时间窗口内的历史数据进行计算,在数据分布发生改变后无法及时进行调整,会出现一段时间的误报,直到窗口数据完全滑动到变化后的数据之后误报才能停止。精准的确定概念漂移后,可以及时对算法进行调整,有效的减少误报。目前较为完善的方法为StepWise方法。本文在StepWise方法的基础上结合核密度估计来对概念漂移进行检测。并结合某商业银行71777条数据对两种方法进行比较,本文提出的综合法对29.25%有效提升了精确度,提升幅度最大可以达到17%,对65.94%的数据检测的效果与StepWise相同。3.对于出现异常的数据指标,运维人员需要找到与其具有较强关联性的其他指标来排查异常发生的原因。并且对于一些重要的交易指标,也需要分析这些指标变化,是否对其他指标造成了影响。本文基于线性相关性计算方法,对某一项数据指标与其他指标的关联性进行计算。不同于大部分关联性分析算法认为不同KPI之间的相关关系是一成不变的。本文验证了数据间的关联性会随着时间改变发生变化。因此设定按小时/日/周来计算互相关值。并且对相似波形的相位差做了限制,使得算法的计算速度提升约75%。算法运行结果给出了与待测指标关联性最高的N条KPI指标及其相关度。该算法已经在某商业银行中推行使用,验证了算法的实用性。本文以某商业银行实际数据为例,改进了现有的概念漂移检测模型,提升了对概念漂移检测的准确性。并且结合实际情况,提出了关联性分析算法。在实际运维工作中,可以有效帮助运维人员排查异常数据来源,或分析某些指标变化可能造成的影响。
其他文献
肠套叠是指一部分肠管套入其相连的肠管腔内,是婴幼儿期常见的急腹症之一,也是引起婴幼儿肠梗阻的常见病因,多发生在两岁以下,尤以6~8个月的男婴为最多,2006年10月~2009年10月
随着人类文明和社会的进步及现代医学的发展,重症监护室的护理管理工作是临床护理工作中极为重要的组成部分,患者也对其提出了更高的要求。重症监护室的宗旨是为危重患者提供更
《普通高中历史课程标准(2017年版)》指出历史课程要将培养和提高学生的历史学科核心素养作为目标,历史学科核心素养的提出为高中历史教学提供了教学、评价的方向和依据。史料教学是最能体现历史课程改革理念,最能体现历史学科特性的教学方式和手段,并且已经成为中学历史教学发展的趋势,在中学历史课堂上得到广泛的应用。论文以对汉中市汉台区高中历史史料教学现状的调查为基础,分析目前高中史料教学存在的问题并找出原因
公共参与是新高中思想政治课课程标准(2017)提出的思想政治课教学必须着重培养的学科核心素养之一。情境教学法是思想政治课教学实践中培养学生公共参与素养经常被采用的一种教学方法。但在当前一些高中思想政治课堂运用情境教学法培养学生的公共参与素养的认识和实践中还存在一些问题,一定程度上妨碍了课堂教学目标的全面落实。如何采取切实有效的措施,解决这些问题,是本文探讨和研究的核心课题。本论文大致分为四个部分,
经过10多年的努力,已开发出新一代的声波测井工具.这些新的测井工具是专为测量各种不同岩层中地层的横渡速度而设计的.它所获取的横波速度,采用传统的测井工具并非都能获得,
加利福尼亚艾博特幅许多花岗岩中产生大量的由近平行陡倾斜节理组成的走滑断层带,这些节理一般长度小于50m,间隔从几厘米到几米,一些节理后来滑动成为小断层。简单断层带由倾
随着城市化的迅猛发展,大量基础设施建设、开矿采石作业和房地产开发等扰动和破坏了原有地貌和植被,造成了严重的水土流失。但长久以来,人们一直认为水土流失只发生在山区,着
由沉积作用、生物作用和成岩作用因素引起的均时现象(time-averaging),在海洋环境中广泛存在.应用地层学、生态学、埋藏学或沉积学的标准可以分辨它们.象分异度、物种相对丰
当特马豆克期进入阿什极期,浮游笔石动物群可分出两个区:冷水大西洋动物区和热带水太平洋动物区.笔石分区的顶峰是在阿伦尼克—兰维尔期,当时,太平洋区包括劳伦琴、澳大利亚