基于角色模型的周期性大规模分布式任务管理框架的研究与实现

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:jackie_kara
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机技术和互联网的迅速发展和普及,将一系列独立的计算机互连起来共同完成一个计算或者处理一个任务成为了可能。由此,便提出了分布式计算。分布式计算最为核心的优势在于能够提高任务的执行作效率。对于有周期性需求的大规模复杂任务,当其实际需求的周期时间较短而任务规模较大时,很难保证每个周期的任务都能够在周期时间内完成。在无法改变实际需求的情况下,只能尝试提高单个周期中任务的执行效率。因此,结合分布式任务处理在大规模任务处理方面的优势,设计并实现一个能够适用于周期性大规模任务的分布式任务管理框架是十分必要的。本文提出了一个基于角色模型的周期性大规模分布式任务管理框架,用以解决周期性大规模任务无法在周期时间内完成的问题。同时,本文针对分布式任务处理中分布式集群由于硬件和网络的不稳定性所导致的错误和故障,结合角色模型中“让它出错”的容错思想,对本文所实现的框架进行容错。本文主要工作包括对相关理论和技术进行学习和研究,对框架进行需求分析,根据需求分析对框架进行设计和编码实现。最后,本文对所实现的框架进行了功能测试、性能测试和可用性测试。测试结果表明,框架能够实现对任务的周期调度和分布式处理,同时框架的容错机制能够保证框架在运行过程中整个任务集的状态可控。本文利用将周期调度与分布式计算相结合的方式,独具特色地实现了对周期性大规模任务处理的管理和控制。并且在利用分布式任务处理技术提高任务处理效率的同时对整个分布式任务处理集进行了容错,保证了框架在运行过程中整个任务集的状态可控。本文所实现的框架应用于某电信运营商的日志处理和平台计费。
其他文献
终端直连通信(Device-to-Device,D2D)以其高速率、低功耗、低时延等特点,在提升系统吞吐量、提高频谱资源利用率等方面的巨大优势成为近来研究热点。当D2D链路与蜂窝链路共用
随着网络和其他信息技术的高速发展,计算机网络已成为社会生活必不可少的一个部分。但是,由于Internet其本身所具有的开放性和共享性在给人类社会带来了便利的同时也带来了更
柏拉图在《会饮篇》里提出"美的阶梯喻说",旨在探讨与生俱来的爱美欲求,关涉一种精神型爱欲现象学。从审美与目的论角度来重释这一喻说,从中可见出以哲学研习与德性修养为主
研究目的:2016年3月23日,在海南三亚召开的澜沧江—湄公河合作(澜湄合作)首次领导人会议后,澜湄合作成为体育学者们重点关注的对象,围绕澜湄合作的"3+5"合作框架,即以政治安
随着制药、食品发酵、造纸等产业的迅猛发展,排放出大量富含硫酸盐和硝酸盐的有机废水,采用常规的厌氧工艺处理后仍然含有大量的硫化物和硝酸盐,而目前针对硫化物和硝酸盐废
软件定义网络(Software Defind Network:SDN)和网络功能虚拟化(Network Fuction Virtrue:NFV)作为两种新型网络技术,学者们对于他们的基本架构和联合架构都作了大量的研究。
目的:调查了解海南三亚地区儿童引起呼吸道感染的菌群分布及常见细菌耐药情况。方法收集2010年5月-2011年5月本院儿科收治的呼吸道感染患儿的痰标本培养阳性的菌株及药敏结果
会议
近年来随着互联网业务的快速发展,终端用户的数量呈指数增长趋势;如何提高网络宽带,进行合理的网络拓扑布局,成为了急需解决的问题。“宽带中国”和“光纤入户”发展战略的实
随着移动互联网与物联网的蓬勃发展,移动应用层出不穷,移动用户对下行传输速率等移动网络性能有了更高的要求。测量汇报技术因其对移动网络性能参数的实时采集,使其能够更加
在现代社会人们越来越关注健康问题,导致越来越多的人开始通过签约私人医生来保证自身的身体健康。但是现在的私人医生的质量参差不齐,病人不能判断私人医生的可信度。对于私