基于可视化技术的分布式系统监控数据分析

来源 :浙江大学 | 被引量 : 0次 | 上传用户:w232010
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
分布式技术是目前互联网企业搭建平台不可或缺的技术之一,庞大的分布式系统往往每天都会产生大量的数据。分布式系统监控数据的可视化可以帮助运维工程师更好地了解网络结点的状态,挖掘出监控数据中所蕴含的信息,更迅速准确地制定运维策略。因此,如何将可视化技术应用于分布式系统对互联网领域有着重要意义和价值。本论文针对如何将可视化技术应用于分布式系统的监控数据进行了研究,解决了监控数据的采集,数据处理和映射,可视化展示,监控数据分析等问题,搭建了一个完整的数据可视化系统。本文选用Logstash,Redis,Elasticsearch,OpenTSDB等技术实现数据采集和存储,采用D3框架实现ThemeRiver,Event Timeline,Circos,Stack等数据可视化模块,并载入真实数据来进行可视化分析实践,以验证本文所实现的可视化模块的可行性和有效性。论文的主要研究工作有:1.监控数据的采集和存储。针对目前市面上存在的服务器监控技术进行了对比和分析,从原理,适应性,实现优化等角度考虑选取合适的技术来采集和存储结点监控数据,为可视化提供数据来源。2.可视化模型的设计和实现。本文针对网络结点数据可视化的需求进行了调研和分析,选取负载数据,网络通信量数据,日志数据作为可视化数据,设计并实现了ThemeRiver,Event Timeline,Circos,Stack等数据可视化模块,并添加简单的交互来增强可视化模型的实用性。3.基于可视化模型的监控数据分析实践。载入真实数据来进行可视化分析实践,通过分析监控数据来验证本文所实现的可视化模型的有效性和可行性。将可视化技术应用于分布式系统监控数据的分析,可以帮助运维人员尽早发现网络结点中潜在的问题,及时调整结点状态,预防服务器奔溃等灾难性事故的发生,为制定有效的运维策略提供参考。
其他文献
在当前市场经济环境下,企业发展速度较快,企业各项改革不断深入,在这种新形势下,企业需要重视提高党建思想政治工作水平,使其能够与新形势下企业的发展相适应。文中分析了党建思想
排污许可制度与公众利益保护直接相关 ,公众直接参与到排污许可制度的管理过程中是保护公共利益的重要途径。美国的排污许可制度在这方面有大量成熟的经验可以借鉴 ,尤其是 :
<正>肺栓塞(pulmonary embolism,PE)是指来自静脉系统或右心的内外源性栓子阻塞肺动脉或其分支,引发肺循环和呼吸功能障碍的一组综合征,栓子包括血栓、脂肪细胞、羊水、空气
近年来,经济全球化、信息化不断推进,我国社会各方面都受到了各种思想的冲击,尤其是处在象牙塔中的大学生的思想受到影响,民主社会主义在大学生中认同度比较高,但大学生对其
在进行党的先进性建设,以及党的执政能力建设过程中,党的基层组织一直处于一个基础的地位上,拥有无法取代的作用,同时也是党中央能够全面工作并且体现战斗力的基础。基于此,分析了
以高筋面粉和灵武长枣粉为主要原料,白砂糖、活性干酵母等为辅料,制作灵武长枣面包。采用单因素和正交试验方法,以感官评价为考核指标,优化并确定制作的配方和工艺。结果表明
从地方高校学科实际出发,根据平衡计分卡的绩效评估思想,从学术声誉、基地建设、科学研究、学术队伍这四个维度构建地方高校学科评价的平衡计分卡,结合德尔菲法和层次分析法,对平
文章介绍了龙首水电站碾压混凝土砂石料生产系统和混凝土生产系统的特性、设备布置及运行改造,总结了两个系统的生产能力、生产质量情况,对生产中出现的问题提出了建议。
<正> 洋地黄用于治疗充血性心力衰竭(CHF)已200多年.目前仍是治疗CHF的最常用药物.据1990年美国统计,地高辛最常用,有2100万个处方.近20年来进行了静脉用地高辛后几个小时的