面向工作流任务的云计算资源多目标与容错调度研究

来源 :东华大学 | 被引量 : 5次 | 上传用户:rj1340
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,云计算由于其高可扩展性、较强的通用性和按需提供服务等特点,已经得到了政府和行业越来越多的认可和使用。随着云计算应用的普及,云数据中心所承担的工作势必将越来越繁重。面对愈加繁重的任务,如何对大量异构资源进行合理的调度以保证云数据中心高效、稳定的运行就显得尤为重要,特别是当处理的任务是各任务间具有依赖关系的工作流任务时,因为它直接关系到云计算的服务质量和效益以及用户的满意程度。本论文针对任务间具有依赖关系的工作流任务,分别研究了多目标和容错要求下的云计算资源调度问题,主要内容包括如下几个方面:(1)针对多目标要求,设计了一种内分泌-多种群协作进化启发的多目标优化算法(ECMSMOO),并将其应用到面向工作流任务的云计算资源多目标调度之中。ECMSMOO采用多个种群实现多目标优化,每个种群以一个优化目标为主进行优化。同时,ECMSMOO还设计了一种种群间的竞争与合作机制来实现种群之间的信息交流与合作,从而使其能够搜索到更好的前沿面。为了避免粒子陷入局部最优解,受内分泌系统中促激素和释放激素工作机制的启发,ECMSMOO还嵌入了一个受内分泌启发的进化策略,从而更好地利用外部档案集中的粒子。最后通过对比验证,证明了ECMSMOO在云计算资源多目标调度中的有效性。(2)针对容错的要求,受免疫系统工作机理的启发,设计了一种面向工作流的云计算资源重调度算法(IRW)。IRW模拟免疫系统的工作机制,由监测模块、应答模块、学习模块和记忆模块等四个模块相互协同工作,从而为工作流执行过程中因资源故障而不能顺利执行的任务提供相应的重调度策略,特别适用于相同故障再次发生的情况。为了提高搜索速度,IRW采用K-means算法将资源池中的可用资源进行聚类,从而缩小抗体查找的范围。同时,针对资源池中资源不能满足重调度服务质量要求的情况,IRW还利用虚拟化技术创建新的虚拟机来满足任务对服务质量的要求。最后,通过实验验证了IRW的可行性和有效性。(3)针对容错的要求,基于Primary-Backup(PB)模式设计了一种面向工作流任务的云计算资源弹性容错调度算法(FTESW)。算法首先分析了云计算环境中任务之间的依赖关系对基于PB模式的容错调度的约束,然后分析了容错调度对虚拟机迁移的约束。基于这些工作,在保证容错的需求下,算法设计了云计算环境中面向工作流任务的弹性资源提供策略,包括资源扩展策略和资源整合策略,然后设计了相应的任务主本弹性容错调度策略和任务副本弹性容错调度策略。最后通过仿真实验验证了FTESW能够在实现容错的前提下,可有效的提高系统的资源利用率。(4)同样针对容错要求,提出了一种面向不平衡工作流的云计算资源容错策略的自适应选择算法(IMWSFW)。该算法将复制和重调度两个容错策略有效地结合起来,以发挥它们各自在容错中的优势,并尽量满足工作的软期限。IMWSFW首先对工作流的软期限进行了划分,使得每个任务均有自身的子期限。然后基于任务子期限的不平衡性和云计算资源性能的异构性,为每个任务从复制和重调度中选择相应的容错策略。然后,结合云计算系统资源按需提供的特点,IMWSFW为每个任务选择相应的虚拟机并预定相应的服务时间间隔。对于选择重调度作为其容错策略的任务,当其在首次执行过程中遇到故障时,IMWSFW通过在线重调度为其提供相应的容错策略。为了充分利用任务间的时间间隔,在任务执行过程中,IMWSFW还通过在线预留调整机制来扩展部分未执行任务的子截止期。最后通过仿真实验验证了所提的IMWSFW算法能够提供较好的容错调度策略,且比重调度容错策略具有更高的任务完成率;同时比副本复制容错调度策略具有更高的资源利用率。最后,对全论文的研究工作进行了总结,指出了其中的不足,并对下一步的研究工作和方向进行了展望。
其他文献
文章阐述了档案数字化建设的现状,及档案资源的服务与利用。
中国建筑材料工业协会三届四次理事会暨建材科技工作会议、循环经济与中国建材产业发展研讨会将于2005年1月16~18日在海南召开。
制造业是国民经济的最为重要的组成部分。近年来,我国制造业的传统优势呈递减趋势,制造业的不景气对国家经济发展影响巨大。为了促进制造业的转型升级,国家先后推出制造2025
覆盖网络是由覆盖网络提供商利用应用层协议,将部署在Internet中不同位置的服务器连接起来,以不同于传统Internet基础服务的方式,为多种网络应用提供网络的一种网络服务平台
对某有色金属尾矿库基本情况进行了简要介绍,对尾矿库周边土壤进行采样,分析和评价了土壤中包含的重金属类型及其含量。结果发现:砷、铬、汞元素的含量只是略高于本地区背景
在新时期环境下,环境问题受到了人们的广泛关注,各行各业也都提倡节能减排和环保生产,其中发电行业作为能源消耗的主要行业类型,为了更好达到节能减排的效果,瓦斯发电技术逐
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
面向服务的计算模式能够将功能单一的服务进行组合,形成新的增值服务来满足用户的复杂需求。随着云计算的普及,服务组合也面临新的问题。开放动态的云环境给服务的评估带来了
互联网在人类社会生活和日常工作中扮演着越来越重要的角色,已经成为推动社会发展的巨大动力。然而,由于互联网原始设计考虑不足,传统互联网逐渐暴露出了许多弊端,诸如安全性
环状伪影主要源于高分辨显微CT圆轨迹重建,严重的环状伪影会影响重建图像的后续处理及量化分析。为了避免环状伪影引起的图像退化,本文提出了一种基于三维运动轨迹的高分辨显微CT采集与重建的方法。该方法以高分辨显微CT现有结构为基础,利用旋转台和三维平移台形成待测对象的三维空间运动。首先,基于Insight Segmentationand Registration Toolkit平台,模体数据进行配准获取