云平台下数据交互和存储的优化设计与实现

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:wori10000
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
云计算的应用成为一种不可避免的趋势,平台的作用转变为向终端用户提供数据交互服务。从纵向来看,服务集群是一个分层系统架构,分别通过不同服务层处理对应的服务请求和数据处理。从横向来看,集群节点的协同作用保证了降低单一应用的压力,同时对服务处理的异常情况做出及时处理。在实际应用场景中,用户的请求状态是不可预测的。系统处于正常访问状态时,服务架构能够提供较为稳定的数据支持,但是当出现大量的服务请求或异常请求时,需要系统架构针对服务架构、搭建成本、性能提高等多个方面进行改进。部分服务组件有较为成形的组件设计和提升性能的解决方案,但不适合现有的平台体系结构。在不断地比较相应的优化方案来提升系统的吞吐量和响应时间的同时,也考虑一些成熟的中间件是否能在集群中作为中间协调者。最后结合服务端请求服务的特点,提出了一些优化的方案和系统结构改进处理思路。本文从负载应用场景出发,介绍了不同应用负载的处理策略。针对服务节点对代理请求的处理,将应用层分为两个处理核心:请求流量处理和请求分发处理。针对不同处理层不同的处理重点,设计了相应核心业务处理算法和突发流量的令牌请求策略,保证高优先级请求可以迅速得到处理;对限流层转发的请求进行细粒度的划分,设计对应的负载分配策略,保证后端服务面对多任务请求时更好的利用集群性能,分配到客户端请求的节点能有效的进行业务处理。对数据处理过程中的缓存层分布式结构进行了优化设计,利用Zookeeper作为处理协调者来搭建缓存集群,改进系统部署策略,降低了系统一致设计的复杂性,保证缓存层的处理高效性。对不同结构类型的数据进行分离存储,将结构化数据存储到关系型数据库,非结构化数据存储到非关系型数据库,同时对非结构数据库索引进行转移存储。在存储数据过程中能更好地结合数据库自身处理特点,提升其数据读写性能。该系统不仅针对存储服务模块进行了优化改进,而且为了避免系统级监控组件为实际运维操作带来不必要的困扰,将性能监控方案一并应用到现有的设计模块中。系统中优化与监控相结合,在服务节点出现超过设定阈值的情况时,及时发出预警并可以通过前端查看实时性能数据。在高并发请求的情况下,系统不仅提高了排错处理效率,同时保证了系统的可用性和稳定性。
其他文献
<正>作为一个新兴的历史研究领域,中华人民共和国史研究日益引起学术界的关注,新时期以来获得了迅速的发展,取得了多方面的成就。它的特殊地位和作用决定了中华人民共和国研
会议
随着国内许多厂商纷纷推出了自己的万元笔记本电脑,似乎昔日高不可攀的贵族产品一夜之间来到了普通消费者的身边。然而万元笔记本电脑真像宣传中的那样美好吗?本期“热点话题
个人职业地位的获得方式和渠道一直是社会学研究的重点和热门,大部分研究都集中在原生家庭对个体社会地位的影响上,以此来发现社会的阶级隔离和不平等现象。但是个体在婚后,又组成了新的家庭,建立了新的家庭网络,而配偶对个体社会地位的影响也逐渐显现。因此本文主要从婚姻路径入手,利用CGSS2008的数据,根据不同类型资本继承和转化的特点,研究配偶的社会经济地位对个人精英地位获得的影响。本文研究结果显示:第一,
<正> 提到18世纪英国现实主义小说家亨利·菲尔丁的小说创作,就不能不提到源远流长的西班牙流浪汉小说。顾名思义,流浪汉小说说的就是流浪汉们的故事。它源于16世纪的西班牙,
会议
对拟行下腹部手术的80侵隐者按照随机数字表进行分组,观察组与对照组各40例,分别采慝异丙酚与异氟醚进行手术麻醉,观察2组患者围手术期应激反应情况,分析2种麻醉方式的优缺点。与
对腹腔镜阑尾切除术后是否放置腹腔内引流,一直存在争议。我们对2005年1月—2007年1月的116例腹腔镜阑尾切除术病例进行前瞻性研究,总结报道如下。
一般来说,学习一门语言,最好就是能够深入到语言使用的 地方,通过与那种语言使用区的人们进行亲密接触,这不仅可以了 解他们的文化,而且能很好把握他们使用他们语言的规则,通
期刊
推进后勤建设现代化,必须重视干部队伍建设,其中关键就在于加强后勤干部的官德建设,应从理想信念教育、工作作风培养和激励机制构建等方面入手,培养品德优良的后勤专业人才。
期刊
苏霍姆林斯基多次指出:“教育的效果取决于学校和家庭的 教育影响的一致性。”要教育好一个学生,不能只靠班主任一个人, 要调动一切可调动的力量,形成教育合力。学校领导、任
自上世纪六十年代末,美国贝尔实验室的Ashkin对光操控进行了开创性的研究后,光操控和光捕获技术得到了迅速的发展。光镊利用光学势阱来捕获、操控微粒,具备非接触、无损耗的特点,光纤光镊更有轻便、灵活、成本低的优势。近几十年来,国内外科学家对基于光纤光镊的光操控与光捕获技术进行了大量的研究,光纤光镊的应用扩展到了测量、生物、医药研究等领域。本文提出了一种带有微腔结构的光纤光镊,使用基于时域有限差分算法