网络计算环境分布式COW盘设计及优化方法

来源 :湖南大学 | 被引量 : 0次 | 上传用户:zhuzhuzhuxi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人类社会进入信息时代以来,对计算性能的要求不断提高,网络计算模式能充分的整合计算资源,满足人们对计算性能的高要求,成为当前研究的热点。网络计算模式将计算任务分配给各种分布的计算资源(各客户主机),而将数据(系统数据和用户数据)部署在相应的网络存储设备中,实现了存储与计算的分离,即存储在存储设备的系统数据不再属于某一特定的主体,而是被网络计算环境中所有主机共享。在这种模式下,网络计算环境中存储结构及存储优化变得极为关键。本文主要针对大规模网络计算环境的分布式计算和数据集中存储的特点,结合COW(copy-on-write)写时复制技术,提出了一种分布式COW网络盘的存储体系结构。在这种存储体系下,客户主机的共享数据以只读的方式集中存储在共享源盘中,各客户主机对共享数据的改写块被保存在其相应的分布式COW盘中,在实现存储与计算分离的基础上进一步优化了对共享数据的读写操作。本文的主要研究工作如下:首先,基于COW技术提出了分布式COW网络盘的存储模型,同时结合磁盘记录改写块的稀疏和突发特性,详细描述了分布式COW网络盘体系结构及读写模式,将服务器处理所有客户主机相应COW盘的聚合开销分摊到各个客户主机自身,以加速网络计算环境系统的构建速度。其次,设计了一种改进的64位位图压缩算法以有效减少COW盘位图文件大小,节省服务器磁盘空间和降低分布式COW盘网络传输开销;提出一种适合COW盘改写块突发特性的预取算法,以提高分布式COW盘Cache的命中率。最后,通过实验验证,采用COW网络盘成功的实现了网络计算环境下多主机数据的共享访问,同时实验证明基于改进的COW盘位图压缩和预取算法实现的分布式COW盘降低了多客户主机网络计算环境的构建延迟。
其他文献
粒子群优化算法(Particle Swarm Optimization,PSO)是一种基于群体智能的演化计算方法。同其它智能算法比较,PSO算法具有相关参数少,收敛速度快,且易于实现等特点。近年来,PSO算法
车牌图像的字符分割算法研究,在车牌识别系统中占据十分重要的地位。在该领域的研究中,现有算法大多针对形式单一、对比色明显且受外界环境影响不大的车牌图像。而对于模糊、倾
网络舆论不仅影响人们社会生活的方方面面,也直接影响到国家的政策制定,是当前的研究热点之一。网络舆论的传播离不开网络社区和网络社区中的意见领袖,但当前网络社区的发现、意
基因芯片技术为肿瘤疾病的研究提供了一种全新的手段。在一次实验中,人们可以快速测量组织样本中成千上万个基因的表达数据,这在为收集基因表达数据带来方便的同时,也为从海量基
在云计算快速发展和虚拟化技术被广泛应用的今天,虚拟机动态迁移技术以其高透明性、高速度、提升系统健壮性和容灾能力在科学与商业领域得到了较为广泛的关注与应用。Xen作为
Ad Hoc网络具有节点能量有限,网络容量受限和拓扑结构高度动态变化等特点。拓扑控制策略通过调节节点的传输功率构建出具有某些特定属性(如:连通性、对称性、伸展性)的网络拓扑
在不影响授权用户(主用户)通信质量的前提下,感知用户(次用户)通过感知无线电(CR,Cognitive Radio)技术可与授权用户进行频谱共享,形成频谱共享网络(SSNs,Spectrum Sharing Networks),提
针对传统神经网络算法预测股票价格时容易陷入局部极小值、学习速度慢和预测精度不高等问题。本文以合作型协同进化遗传算法、主成分分析法和灵敏度分析法为基础,优化网络的拓
由于成像机制和外界因素的干扰,图像信息在获取、传输和处理的过程中常常会出现噪声。噪声的出现使得目标信息难以被区分和理解,为了不影响对图像的认识以及后续处理的结果,往往
粗糙集理论是处理不一致、不完备和不精确信息的一种数学工具,具有不需先验信息的特点和优势,能够直接对数据集进行推理和分析,从而发现其中潜在的知识信息和推论。决策表系统的