【摘 要】
:
传统的关系型数据库计算与存储一体化,在面临大数据挑战时难以存储大规模的数据,随着Docker容器技术的出现和快速发展,Docker与Kubernetes组合的容器化环境具备自动化管理、
论文部分内容阅读
传统的关系型数据库计算与存储一体化,在面临大数据挑战时难以存储大规模的数据,随着Docker容器技术的出现和快速发展,Docker与Kubernetes组合的容器化环境具备自动化管理、弹性伸缩等优势,将数据库容器化部署成为必然的趋势。但容器化RDS(Relational Database Service,关系型数据库服务)存在I/O性能消耗(响应延时),导致RDS能力QPS(Queries Per Second,每秒查询数)降低。因此本文提出了基于容器化的共享缓存模型优化方法以及基于自动伸缩机制的优化方法,本文主要研究内容如下:(1)提出了基于容器化环境的共享缓存模型设计方案。针对传统计算与存储分离架构I/O优化方案代价昂贵、只针对计算层或存储层进行优化等问题,参考传统RDS应用场景利用分布式缓存拦截大量的读写请求,避免与存储层的直接I/O,以此优化I/O的方法,设计一个基于容器化环境的共享缓存模型优化RDS持久化过程的I/O消耗。设计过程综合考虑了容器化环境的资源对象Pod、Name Space、Service的特点,对共享缓存模型的可用性、一致性、Key值唯一性以及串联访问模式等进行了详细设计。本文设计的基于容器化环境的共享缓存模型,在提供可接受的服务能力的前提下,降低了计算与存储分离架构中的容器化RDS的I/O响应时间,同时提升了容器化RDS的性能(QPS)。(2)提出了改进的自动伸缩算法IMHPA(Improve Horizontal Pod Autoscaler)。Kubernetes自身的HPA(Horizontal Pod Autoscaler,水平Pod自动伸缩)基于阈值伸缩算法,存在响应不及时的问题,并且现有的基于预测的伸缩算法存在预测误差较大以及支持的指标值类型单一的问题,本文提出的IMHPA算法,支持多种指标值类型(利用率Utilization、平均值Average Value、值Value),并且综合考量HPA定义文件中多项指标对服务的影响,进行及时精确的扩容,以此提高共享缓存模型的吞吐量,降低容器化RDS的I/O响应时间。(3)设计并实现了一个容器化RDS性能优化原型系统,该原型系统包含集群信息提交、RDS注册、共享缓存模型、自动伸缩、Pod工作负载以及RDS性能展示等模块,通过简单的配置操作,提供一个高效的关系型数据库随机注册以及RDS性能实时展示平台。综上所述,本文通过设计基于容器化的共享缓存模型和基于IMHPA算法的自动伸缩机制两个方面降低容器化关系型数据库I/O消耗,提出的方法有效降低了RDS的I/O响应时间。并设计实现了包含RDS注册、共享缓存模型创建、自动伸缩策略等模块的容器化RDS性能优化原型系统。
其他文献
微生物检测是食品检测、生物制药、水质检测等操作过程中的基本操作,随着国家对食品安全问题的日益关注,相关部门的检测任务量也在不断增加,尤其在疫情期间,对食品质量的检测更加严格。而对食品微生物中的菌落计数是检测时最关键的技术手段,由于菌落目标较小、且外形多样,所以识别起来较为困难。目前能对微生物样本中的菌落进行实时检测的成熟设备还存在缺口。所以针对微生物培养和菌落计数分析一体化设备的研究成为当前的一个
随着移动互联网的发展,微信小程序以其所具有的特质影响和改变着整个互联网的发展。同时,随着近些年大数据、人工智能的发展,各种智能穿戴设备层出不穷,如智能手环、智能眼镜、智能服饰等等。而通过手机去连接并控制这些设备,已成为一种必然结果。而在健康领域,虽然也不乏一些健康类的软件,如:以网上售药为主的医药类应用,提供在线问诊的健康咨询平台等。不可否认,这些应用都在一定程度上缓解了用户上医院挂号难、排队难、
目前,我国制造类企业的自动化生产线的生产模式仍然以传统的劳动密集性的生产模式为主,自动化程度不够高、生产效率低、故障率高的问题约束着企业的发展。随着劳动力成本和对产品可靠性要求的不断提高,企业已经处在发展的关键阶段,更加先进的自动化生产模式能够帮助企业提高制造效率,节约生产成本,提高竞争力。因此,对自动化生产线的优化方法提出了更高的要求,建立自动化生产线的优化体系对于新的生产趋势下满足多变化的生产
本文以国务院、广东省人民政府、深圳市人民政府这三级政府部门2009-2018年的三十篇政府工作报告为研究对象,从政府绩效管理的视角出发,结合行政学、管理学、文体学等理论,探
构建中外海洋文化交流核心术语库,是服务“一带一路”以及海洋强国建设的必要步骤。在研究海事相关文献过程中,本文作者发现中外海洋文化交流历史文献的数目庞大,内容庞杂,术语检索起来比较困难,应该构建中外海洋文化交流相关的汉英术语库,以方便专家学者开展相关研究。本文作者首先在阅读术语相关文献的基础上,对术语界定、术语识别、术语定名的研究现状进行调查,并对中外海洋文化交流术语库的构建需求进行分析。以《中外历
生物质作为一种天然的有机材料,可以通过现代多种生产技术转化为不同形式的燃料和不同种类的化学品。葡萄糖等糖类是连接生物质与生物能源、化学品和高分子材料的重要平台化
洪水灾害是制约人类社会经济发展的主要自然灾害之一。受地形、水文、气象等因素的影响,我国西南山区中小流域洪水灾害频发,成为防洪减灾工作的重点部署区域。位于重庆市北部
纪检监察体制改革,是以习近平同志为核心的党中央着眼于强化对党和国家的监督、实现国家长治久安的重大战略决策。党的十九大作出“深化国家监察体制改革,将试点工作在全国推开”的部署后,改革不断提速增效,全面深入地推开纪检监察体制改革工作。2017年11月,L区成立了深化国家监察体制改革试点工作小组和办公室,并于2018年8月完成了改革的阶段性任务。从2018年11月起,L区在各乡镇街道成立了纪检监察室,设
随着移动通信技术的不断演化,第五代移动网络(5th Generation Mobile Networks,5G)已经正式商用。这为物联网带来了广覆盖、大连接和低时延的网络接入服务,万物互联的时代已
T4 DNA连接酶是一种负责DNA连接的关键工具酶,分子量为55.23 k Da的单链多肽(Gen Bank序列号:X00039.1),催化双链DNA上相邻的3’羟基和5’磷酸末端形成磷酸二酯键。传统的重组T