弥散云资源感知与调度方法研究与实现

来源 :河北经贸大学 | 被引量 : 2次 | 上传用户:lvz
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
云计算是一种实现大规模计算的信息处理方式,本质上是利用虚拟化技术、分布式计算技术和网络技术将分散的云基础单元(简称云元)汇聚到一起形成共享资源池,并以按需、弹性和可度量的方式向用户提供云服务,这些“云元”通常跨集群、室、甚至数据中心分布并随时间动态变化,随着分散的“云元”在时空上动态变化,资源池中的海量资源呈现弥散特征,形成弥散云资源,即一种分布式的具有时变性的变粒度的云资源。怎样在海量资源中准确快速感知并调度这些资源,提供低成本高性能可伸缩的云服务,提高用户满意度是目前和今后云计算技术领域面临的重要问题。本文从IaaS资源提供方和请求方两个角度,研究弥散云资源的感知与调度问题,主要内容有:(一)从IaaS资源提供方角度,提出基于MA感知的弥散云资源调度方法,主要研究:(1)提出基于移动Agent范型的IaaS层资源部署架构,并给出弥散云资源感知方法:基于作业完成时间分布预测,通过设置置信区间,剔除不符合条件的策略,一次性压缩策略空间,引入Skyline计算思想细粒度抽取价值资源,形成资源视图;(2)研究基于移动Agent感知的弥散云资源调度方法MA_RS:利用基于移动Agent的资源感知层感知的信息,利用弥散特性,结合多任务的松耦合特性,构建“搜索——决策——执行”这样一个多阶段迭代调度模型,实时细粒度的捕获工作负载的局部特性,并根据相邻阶段工作负载的相似性特点,在工作负载变化剧烈(平缓)处自适应动态分割(合并)调度区间,实现整体调度性能的提升;(二)基于移动Agent的MapReduce云计算计算框架,针对云资源弥散性,从资源请求方的角度考虑提出了一个公平共享指标来实现高性能和公平性的基于云资源弥散性感知的公平调度方法,主要研究:(1)构建基于移动Agent的MapReduce分布式计算框架MapReduce_MA,定义移动Agen(t如Master_MA和Slaver-_MA)的功能集合,并具体实现了移动Agent的主要功能;(2)研究基于云资源弥散性感知的公平调度方法,引入“共享进度份额”来定义共享和公平,根据用户偏好选择任务,依据性能函数匹配相应资源,并给出了基于云弥散性感知的公平调度算法。这种调度方法不仅权衡了成本和效益,而且能够在异构集群中提供良好的性能和公平性。本文将上述架构和方法在惠普实验室开放Cirrus集群上进行了有效性评估并通过实例验证的形式说明了本文感知调度方法的潜在好处。
其他文献
随着智能移动终端设备在普通大众生活中的普及,以移动终端为平台的环境星遥感数据共享受到越来越多的关注。环境星遥感产品数据由遥感算法和遥感影像数据经过遥感产品生产过程产生,在传统的遥感数据共享方式中,这一动态生产过程发生在用户提交共享请求之前,这种方式带来的问题是用户请求共享的产品数据缺少自主选择性及获得的产品数据类型有限。针对该问题,论文采用遥感数据处理系统作为遥感产品数据生产的支撑平台,提出一种数
水资源是生命赖以生存和社会经济建设的必要条件,在当前水资源利用过程中存在的问题有:(1)水资源短缺是水资源管理中面临的首要问题,明确缺水地区的缺水类型,有利于针对不同短缺
现在在全世界范围掀起了一股股IT浪潮,例如云计算和物联网的兴起、移动通信服务进入了4G时代、大数据时代的到来等。这些IT革命使人类的工作生活更加便捷和轻松。特别是大数
随着信息技术的发展和政府工作方式创新的理性选择,电子政务应运而生,并成为联系政府和公众的一个重要窗口。我国电子政务虽然取得了一定的成绩,但仍然存在诸多问题。特别是目前
Hash函数是信息安全中最重要的技术之一,广泛应用于数字签名,数据完整性,消息认证等领域。而随着最经典的Hash函数如MD5、SHA-1在2005年被王小云教授等成功破解后,研究者们正在寻
在网络和信息技术飞速发展的背景下,智能家居成为了一个新的IT浪潮与研究热点。  目前,市场上主流的智能家居实现方式是在家庭范围内以有线或无线的方式来控制家庭居室内的电
云计算作为一种新型的商业计算模式,向用户提供可配置的、共享基础资源的计算模型,使用户获取服务的方式、手段和花费发生了巨大变化。虚拟化技术作为云计算的关键技术,因其
近年来,云计算因其高性能、高可靠、可扩展等特点在海量数据计算中得到了广泛应用。在信息技术飞速发展的条件下,海量数据处理成为计算机科学领域的新挑战。MapReduce作为一
当今大型软件系统的开发活动不可避免的深深植根于宽广的问题上下文(Problem Context)当中,涉及到各种各样的利益相关人员(System Stakeholder),这些人会从自身的视角(Viewpo
在日常的生活和工作中,越来越多的人采用图片来记录生活和工作的点点点滴滴。图片的应用已经显得越来越重要。现在虽然有很多对图像进行加密的算法,但是各种算法仍然存在一定