基于Redis的云数据库的研究与实现

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:liongliong493
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络的发展,各行各业的业务系统体量越来越庞大,业务内容也越来越复杂。传统数据库已经无法满足人们对于响应时延的要求,因此,Memcached等缓存系统被广泛的应用。实验室现有云平台也使用Memcached作为缓存数据库来提高云应用的打开速度和响应速度,但是在日常开发维护中发现存在高可用、效率、持久化等问题。为此,本文以Redis为基础,研究并实现了一套高可用的云数据库系统CRDB(CAC Redis DataBase)作为云平台的缓存数据库。主要工作如下:首先本文分析了现有实验室Memcached缓存数据库存在的问题并提出解决方案。当前实验室使用的Memcached是单点的,不支持高可用,另外只能处理键值对数据,对于其他复杂的数据类型需要客户端做大量的数据转换工作,影响开发效率。并且Memcached不支持持久化功能,对于一些关键数据很容易丢失。针对以上问题,本文以Redis数据库引擎为基础,基于proxy-based架构,提出了 CRDB云数据库系统,该系统主要由访问模块,代理模块,数据处理模块和管理模块四部分组成。然后本文从系统的四个模块出发,进行了详细的分析设计并给出了具体的实现。(1)访问模块作为系统的入口主要处理来自客户端的大量请求,使用了 LVS和Keepalived的组合架构进行负载均衡,使系统具备处理海量并发数据的能力,同时加入了用户验证以面对多租户访问的场景。(2)代理模块通过对Twemproxy二次开发,添加了多进程功能,以应对云平台的高性能要求。使用代理层对底层节点实现分片,在将海量客户端请求均匀分配转发的同时,也确保了底层能对上层进行透明的扩容操作。(3)数据处理模块实现了数据持久化操作,并对Redis的内存替换策略用LRU-K算法进行改进,提高系统对于云平台热点数据的处理性能,提升应用响应速度。(4)管理模块使用Prometheus开源组件对系统进行监控,开发了各种Exporter业务插件,帮助管理人员对于系统的掌握更全面。另外使用Sentinel架构完成了故障检测和故障处理功能,解决了单点问题,并基于log4cxx二次开发了一套日志系统,为运维和开发人员解决问题提供良好的参考。最后本文在云平台中部署了一台CRDB云数据库,并对CRDB系统进行了全面的功能和性能测试。将结果和原来的Memcached缓存进行对比,该系统符合最初的设计要求,满足云平台的需求,且具备较好的高可用和高并发性。
其他文献
本文对小学教师队伍建设问题进行了探讨。翠微小学始终把提高教师专业化水平作为学校根本发展战略,不断创新教师队伍建设方式,使得教师队伍整体水平不断提高,为推动翠微小学的发展奠定基础。完善的组织机构确保确保了队伍建设的良性循环,三大系统工程的启动,骨干研究团队的成立促进了教师团队的成长。多元的培训方式促进了教师的专业发展,搭设广阔平台,为教师成长保驾护航,抓好教学研究,引进专家指导,促进多方交流,广搭展
本文对平谷区校本培训工作进行了探讨。以生态意识,探求校本培训。明确生态校本培训,审视校本培训生态链,把握富集关系,发挥组织功能;探究校本培训生态因子,震颤主导,建立校长成长档案;加强规范环境建设,推出精品课程,深化培训工作,建设发展性课程,让远郊山区校本培训之花也烂漫。
高速铁路网络是铁路旅客运输的重要载体,优化高速铁路网络的性能具有重要意义,本文以全局站点交通可达性最优为目标研究了高速铁路网络的优化问题。在分析2030年中国高速铁路网络拓扑特性的基础上,运用LeaderRank算法识别了网络中的关键站点;最后,以网络全局站点交通可达性最优为目标,建立2030年中国高速铁路网络优化模型,结合相关算法对模型进行求解。结果表明,长沙、贵阳、成都、武汉及西安是2030年
王承绪先生是我国比较教育学界的奠基者,在其从教近80年生涯中,为中外教育交流事业做出了突出的贡献,他用其不变的信念和不懈的努力,谱写出国际教育交流事业的辉煌页章,用其真挚的热情和学术的敏感演绎了高等教育研究的不朽真谛。本文尝试从王承绪先生从事国际教育交流的经历以及由此建立的国际友谊和学术情缘入手,通过王先生翻译伯顿.R.克拉克的作品观点折射王先生的比较教育思想。
进行博士生教育的比较研究,课程是一个重要的视角。通过课程目标、设置、实施、考核与保障等维度对美国博士生课程进行分析,概括出美国博士生教育在课程理念和课程体系方面的两个主要特点,进而根据我国博士生课程存在不重视、不系统的问题,建议我国优化博士生课程结构,强化研究能力,培养创新人才。
国有土地储备管理信息化融合是政府各级土地储备机构在国有土地(收)回购、储备土地前期整理开发、储备土地供应等业务管理环节中,运用"大数据"、"互联网+"等信息技术,使新时代国有土地储备管理与互联网新技术高质量融合发展,形成与时俱进的国有土地储备管理信息系统,为调控房地产市场提供强有力的信息技术支撑,可实现国有土地储备信息的高效共享利用,保障房地产等土地市场健康、平稳、有序地发展。
学位
目的分析徐州市云龙区高氟地区学龄儿童氟斑牙发生情况及其影响因素,为氟斑牙的预防和治疗提供理论依据。方法选取徐州市云龙区2017年5月至2020年5月氟斑牙患病率较高的4个村庄作为调查地点,从中选择904例8~12岁学龄儿童的一般资料进行回顾性分析,根据Dean法对学龄儿童的氟斑牙情况进行诊断,根据结果分为氟斑牙组(548例)与非氟斑牙组(356例)。比较不同时间高氟地区学龄儿童氟斑牙发生情况与氟斑
教育的社会功能作为其教育功能之一,有其不可替代的特殊作用。教育的政治功能、经济功能、文化功能、个体发展功能等又与社会功能之间融合与分离。然而,中外理论界中,对于教育的社会功能又以不言苟同而存在严重分歧。对教育所发挥的方向、层次、过程与结果又大相径庭,教育到底有哪些社会功能?需要重新审视、思考。