面向分布式数据库的Insight监控系统的设计与实现

来源 :南京大学 | 被引量 : 0次 | 上传用户:jianglihongnj
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着软件技术的发展,软件系统对高并发访问的要求越来越高,这使得分布式数据库逐渐取代了传统数据库。然而分布式数据库需要部署在分布式集群中运行,并且其系统架构相当复杂,给运维人员带来了高成本、高难度、高挑战的数据库运维监控问题。一旦分布式数据库发生运行故障,运维人员很难快速定位、分析并解决故障问题。基于分布式数据库带来的问题,本文研究了Insight监控系统的解决方案,该系统的目标是监控分布式数据库集群各个组件的运行情况、执行性能、响应效率,提高运维人员在分布式数据库发生故障时解决问题的效率。本文着重介绍了Insight监控系统部分功能的设计和实现,从系统模块划分上,该系统主要分为网络监控模块、组件监控模块、SQL诊断模块、数据维护模块,每一模块都负责Insight监控系统的不同功能实现。网络监控模块负责外界应用访问分布式数据库集群的网络性能监控;组件监控模块负责监控分布式数据库集群各个组件在服务器上的部署和运行情况;SQL诊断模块负责诊断分布式数据库集群执行SQL请求的执行性能;数据维护模块负责定时清理Insight系统中My SQL数据库和Elastic Search集群的过时数据。针对分布式数据库的监控问题,Insight系统解决的技术问题有以下三点:(1)整个项目的构建采用了SpringBoot框架,极大地提高了系统开发效率。(2)基于Elastic Search搜索引擎,为分布式数据库集群的非结构化数据建立了索引,并定时将数据同步到索引库中,极大的提高了搜索效率。(3)基于Kafka中间件,一方面为Insight系统提供了高效采集分布式数据库集群数据的方案;另一方面,为Insight系统提供与分布式数据库集群进行消息交互的消息队列。目前Insight系统还需要集成更多的分布式数据库监控功能,还处于第三期开发阶段。
其他文献
随着时代的发展,人们开始越来越多的使用屏幕、相机、照片等观察记录世界,因此对高质量的图片的需求也越来越旺盛,然而对于现实世界的真实场景来说,它的动态范围可达到数十个数量级,同时现在的图像采集装备因受到硬件的制约,只能够显示有限的动态范围,拍摄所得的照片很难去完整的记录反映真实的场景信息,因此,高动态范围图像融合技术应运而生,并且吸引了越来越多学者专家的关注。目前的高动态范围图像的融合,主要通过获取
学位
天然产物小檗碱作为一种季铵型异喹啉类生物碱,广泛存在于各种药用植物中,对多种肿瘤细胞具有很强的抗肿瘤活性,这决定了其在肿瘤防治和抗肿瘤药物的开发方面具有潜在的应用前景。但是由于小檗碱脂溶性、水溶性都比较差,在人体肠道中吸收差,大大限制了小檗碱充分发挥其抗肿瘤治疗的潜力。因此,设计和合成新的生物利用度高、活性强的小檗碱衍生物对于肿瘤防治和新药研发具有重要作用。研究发现,小檗碱反应生成9位酯化小檗碱衍
学位
论文介绍了一种基于Mask Rcnn的文本检测模型,用于通过卷积神经网络(CNN)完成对图像中文本的检测。首先因为图片中各文本经常会出现尺寸差距较大的情况,为了提升文本检测的准确度,我们组合了特征提取网络的高底层特征,通过组合之后的网络进行深层特征和浅层特征的同时提取,这样可同时提高对不同尺寸文本的检测准确度。算法采用RPC网络生成候选框,因为RPC网络是在anchors的基础上进行候选框的预测,
学位
由于工业化和城市化的快速发展,中国土壤重金属污染现状问题严重。而镉是重要的土壤重金属污染物。作为一种在采矿和冶炼过程中释放到环境中的有毒金属,镉(Cd)易在生物体内积累。流行病学研究显示,长期慢性低Cd暴露与心血管疾病,骨密度降低和癌症之间有关联。此外,较高的暴露可能导致肾脏损伤,近端肾小管重吸收功能障碍,以及骨骼长骨骨折。有研究通过添加矿物质营养元素的方法来降低镉吸收和镉毒性,例如在饲料中加入钙
学位
随着云计算的出现,企业的竞争也更加激烈,越来越多的企业选择使用基于SaaS(Software as a Service,软件即服务)模式的软件,这种类型的软件部署实施快,成本低,更易于维护。信息服务平台可以帮助企业以更低的价格更快速的抓住客户,提升客户的粘度。上海某互联网金融公司是一家创业公司,起步较晚,项目体系未成熟,一直未有一套独立的信息服务平台,这违背了“职责分离”的原则,因为不是所有的项目
学位
纳米管材料因其独特的一维管状结构、优异的物理化学性能以及广泛的应用前景,是目前化学、材料科学、微电子等诸多研究领域的热点。其中氧化物纳米管因为种类丰富、组成可调变,具有十分重要的工业应用价值,近年来备受关注。迄今为止,尽管已经有很多关于氧化物纳米管制备的报道,但存在的问题主要是制备方法通用性较差,一般只适用于实验室规模合成,难以进行大批量生产,影响了其实际工业应用。本文致力于发展大批量制备氧化物纳
学位
以往研究表明,鱼类等海产品是人体汞膳食暴露风险的主要来源,然而近期研究发现,甲基汞(Me Hg)在稻米中累积富集后,能够对以米为主食的内陆居民造成严重的汞健康风险。例如在中国,稻米摄入可达到总甲基汞饮食暴露风险的96%。因此,稻田土壤汞(Hg)污染及其微生物驱动的汞甲基化过程受到越来越多的关注。探究稻田环境中汞甲基化的影响因素,尤其是微生物对汞甲基化过程的影响,建立有效模型预测稻米汞风险,对于降低
学位
电致化学发光(ECL)是电化学反应诱导的化学发光,相比多数其它电化学技术,它具有灵敏度高、检测范围宽、背景信号低、操作简单等优势。在过去的研究中,ECL被广泛应用于临床医学、水质以及食品检测等领域。常用的ECL检测方法有单通道光强分析法、双通道光强分析法、ECL光谱分析法以及ECL成像分析法。其中,ECL成像技术除了具有ECL的优势外,它还具有快速检测和高通量的优点,且满足对空间分辨率的需求。随着
学位
我国煤矿资源储量丰富,煤矿开采是重要的国民经济活动之一。在煤矿开采作业中,确保人员安全是重中之重。我国曾多次发生煤矿生产事故,给人民生命财产带来了重大损失。近年来,国家已出台多项政策法规,严格限制矿井开采作业,对于不规范的矿井予以关停处理,有效减少了煤矿事故的发生,保障了矿井人员的生命财产安全。除了政策层面加紧管控以外,从技术上来说,检测矿井下的一些关键指标,若指标异常则发出警告,及时整改,也可以
学位
随着社会经济的发展,城市配电网的规模不断扩大,配电网作为电网面向用户供电的最终环节,能否安全稳定地维护好配电网生产和管理,直接影响社会正常生产生活秩序。馈线单线图作为配电网的基本电力图形,是配电网生产管理的重要数据资源和工具,可以为各项电网业务提供有力支撑。当前的馈线单线图是一种展示电网线路实际物理结构的电力图形,会完整地展示馈线下大部分的设备与线路,可以清晰地查看设备内部的连线结构。但随着配电网
学位