共享存储分布式数据库虚拟分区策略研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:hesion001
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在基于计算与存储分离架构的共享存储分布式数据库中,由于存储节点对等,存在系统性能受制于单机性能,吞吐量不足以及存储节点资源利用率不足的问题,提升存储节点的利用率对提升数据库系统读写性能有着很大的影响。虚拟分区技术可用来提升系统的读写并行度进而提高系统存储节点利用率,在共享存储架构下给出合适的虚拟分区管理机制及分区负载均衡调度策略是本课题的研究重点。设计了集虚拟分区管理、负载均衡和分布式共识机制于一体的共享存储数据库虚拟分区系统架构。该架构主要包含4个模块:计算层虚拟分区管理模块、存储层写虚拟分区管理模块、负载均衡模块和分布式一致性模块。给出一套共享存储分布式数据库虚拟分区策略,解决了虚拟分区的粒度控制、分区维护、分区数据一致性和负载均衡问题。其中,设计了自适应虚拟分区管理策略,以根据系统运行指标适应性调整读写分区粒度,高效安全的处理分区调整时的信息更新,实现分区日志动态绑定、定位和清除;给出了虚拟分区多实例分布式一致性协议,以保证各分区Leader最大限度均匀化分布,提升系统写并行度,实现了各分区副本间并行复制,解决了写虚拟分区数据临时不一致问题,保证了数据最终一致性;设计了虚拟分区负载均衡策略,以充分利用虚拟分区特点并根据节点负载情况进行读写负载分配。此外,设计了异步通信网络,以降低存储层多分区网络连接复杂度,降低通信延迟。借助TPCH测试工具测试虚拟分区的有效性和功能性。测试结果表明,虚拟分区策略能够提升系统的读写性能。大表查询时,节点数越多,合理的分区粒度对于查询性能提升越明显;写虚拟分区性能提升不明显但是较为稳定;负载均衡策略能够较好的实现负载分配。
其他文献
目前,老年人群体的糖尿病患病率年年攀升,老年人独立完成测血糖过程较为困难。因此本论文针对老年人群体,设计血糖检测自动装置。论文完成了以下工作:首先介绍了我国糖尿病特别是老年人患糖尿病的形势,回顾了国内外家庭血糖检测仪器的发展,分析市场上主要家用血糖检测仪器产品特点。目前家用血糖检测仪器操作步骤较为复杂,对于年纪较大特别是有基础疾病的老年人操作起来有很大困难。第二、老年人的视力不佳眼花、基础疾病多、
中国电力体制于近几年开始不断深化改革以来,全国各地开始涌现出了大量售电商。售电商作为电力市场中起关键性作用的参与成员,如何抉择在各个电力交易市场的交易电量所占购电总量的最优百分比以及如何选择使售电商利益最大化的售电策略是售电商在进行购售电决议中的焦点问题。然而,未来随着改革的不断深入,现货市场中的交易电价的不确定性也将随之增加,售电商应该怎样更加精准的对现货电价进行预测从而做出最佳的供售电策略方案
随着对智能电网与能源互联网的深入研究,传统的电力变压器暴露了许多不足,相较于传统变压器,电力电力变压器不仅具有传统变压器的功能,而且具有体积小、能实现网侧电压电流单位功率因数运行、能提供稳定的并网接口等优势,逐渐成为新一代电网的重要设备。本文以单项级联型电力电子变压器作为研究对象,针对其输入级级联H桥(Cascaded H-Bridge,CHB)和隔离级双有源桥(Dual Active Bridg
在烟草分拣与配送领域,随着客户订单向复杂化和多样化发展,为提高分拣的准确度与配送的效率,需要研发与分拣线配套的条烟识别与纠错系统。本文针对烟草分拣线特点与技术需求,对精准高效的条烟识别系统展开了研究,研究内容如下:首先在分析条烟分拣线的组成和识别设备的布局后,提出了一种基于多角度扫码和正面图像识别相融合的条烟识别系统,设计了半封闭隧道拍摄装置、烟姿矫正装置、和多角度扫码布局,提高了条烟图像质量和条
配电网的可靠稳定运行是电力系统安全稳定运行的基础。然而,分布式电源(Distributed Generation,DG)的接入造成配电网的监测与控制变得困难。再加上原始的量测数据存在误差,如果直接使用生数据对配电网运行状态进行分析,势必会造成对配电网的误操作,以至于影响配电网的安全稳定运行。状态估计作为配电管理系统(Distribution Management System,DMS)的核心,是配
分布式电源并网及负荷波动会引起系统电压质量下降、有功损耗增加等一系列问题,使得主动配电网无功优化成为近些年的研究热点。主动配电网无功优化不仅可以控制传统无功优化调节装置,还能协调利用分布式电源的主动无功调节能力对配电网进行优化,可以减小配电网的有功损耗并提高电能质量。然而随着系统波动性的不断增强以及人们对供电质量要求的不断提高,对主动配电网无功优化研究是一个挑战。因此,可以利用电力电子技术提高主动
机械臂广泛用于搬运、焊接、喷涂、汽车装配和纺纱厂等批量化、规模化加工制造与重复性流水作业的场合。随着工业化水平的突飞猛进,先进工业生产线对机械臂的精准控制提出了更高要求,如机械臂即使在有测量噪声、外部干扰和参数不确定性等情况下也要保证足够高精度的控制性能。迭代学习控制方法具有控制结构清晰、可充分利用先验信息、重复控制过程等特征,有助于提高机械臂系统关节位置收敛速度、路径跟踪精度,能够有效地解决机械
触觉是人类探索周围环境时不可替代的信息来源。它将压力、振动和温度等多种感官信息传递给中枢神经系统,在处理目标的材料特征和细节形状方面比视觉和听觉更具优势。赋予机器人触觉感知能力,以便感知周围环境,为后续任务(如目标分类)提供有用信息。因此,通过触觉感知来实现目标分类的研究对于智能机器人的跨越式发展具有重要意义。本文基于多触觉传感器采集的纯触觉数据,进行了多种目标分类方法的研究。首先,针对目前纯触觉
随着能源结构调整的推进,我国积极发展包括风能、太阳能在内的可再生能源。但风电和光伏发电具有随机性、间歇性等特点,随着它们并网比例的提高,其输出功率的不确定性给电力系统稳定运行提出了新的挑战。与此同时,这些可再生能源的大规模并网使得系统调峰问题逐渐显现。一方面,我国电源结构中火电容量过大,使得火电机组承担深度调峰任务成为常态,而深度调峰状态下运行成本的急剧增加导致大量火电厂生存十分困难。另一方面,在
随着社会飞速发展,风、光等可再生能源被广泛应用,微电网以其能源利用率高、可再生能源接纳性强等优点越来越被各国重视。然而,风、光出力及负荷用电的不确定性给系统运行带来风险。因此,如何保证微电网安全运行以及促进可再生能源消纳成为研究关键。所以本文对计及不确定性因素的微电网优化调度进行了研究:本文首先介绍了计及不确定性的微电网优化调度问题,在现有研究中,处理该问题时多采用日前-日内多时间尺度优化调度模型