存储虚拟化数据传输的设计与实现

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:qianjiuzhou
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息化技术的发展,传统的数据管理体系已经不能满足数据密集型应用和高性能计算的要求,存储虚拟化技术为解决这个问题提供了一条有效途径.GDSS(Global Distributed Storage System)是一个存储虚拟化系统,该系统实现了广域网范围内存储资源的统一管理和共享,屏蔽了底层数据资源的分散性和异构性,为用户提供了透明的逻辑视图.传输系统是GDSS中的一个重要模块,其性能直接决定了GDSS的性能.为了确保GDSS的高性能和高可靠性,传输系统综合采用了多种技术,包括自适应传输、分片并行传输、连接复用和基于多副本的断点续传等.其中自适应传输根据文件大小和服务器状态决定传输方式:当传输大文件时采用分片并行传输,通过多线程并行传输,提高传输效率;而当传输批量小文件时采用连接复用技术,通过一个连接传输所有小文件,这样与普通文件传输协议(File Transfer Protocol,FTP)相比显著减少了连接次数,从而提升了传输性能.另外,为了确保系统的可靠性,传输系统还采用了基于多副本的断点续传和双日志技术.其中基于多副本的断点续传在普通断点续传的基础上利用系统中存在多副本的特点,在恢复过程中充分利用可用的副本;而双日志技术采用主日志和备份日志相结合,确保任何时刻至少存在一个日志是可用的,为断点续传的正常进行提供基础.经过测试,与普通FTP相比,GDSS传输大文件时的性能提高1~3倍,传输批量小文件时的性能提高2~10倍.结果表明GDSS传输系统的性能达到了预期效果.
其他文献
随着计算机技术的发展,嵌入式系统在生产和生活中扮演着越来越重要的角色,我们在家用电器、医疗卫生、生产生活等各个方面都能看到嵌入式系统的影子,它们正推动着社会的进步.
该文通过对基于Strand空间模型的安全协议分析方法的研究,提出了用于提高安全协议分析效率的改进的状态空间简化技术.在协议分析过程中,将一般的状态空间简化技术与剪枝定理
随着互联网的飞速发展,作为网络资源的主要载体网站的发展也极为迅速。随之而来的基于WEB的网络综合管理系统也得到了广泛地应用,它们提供多种网络服务,为各种领域提供了方便、
在多标记学习中,每个对象用一个特征向量表示,它可以属于一个或多个类别标记,标记之间存在相互依赖性。多标记学习的任务就是为每个测试对象预测一个或多个适合的类别标记。多标
本论文的研究内容是国防“十五”预研项目“专用高性能微处理器”的一部分。 PowerPc603e微处理器系统由定点执行单元、浮点单元、指令(数据)Cache、总线接口单元、存储管
OWL(Web Ontology Language)本体作为形式化的知识表示模型在语义网(Semantic Web)中扮演着至关重要的角色,为领域应用系统提供共享的词汇和概念性知识。OWL语言的理论基础是
学位
个性化推荐系统通过分析用户的历史行为帮用户挖掘出可能感兴趣的商品或者服务,例如在购物时推荐可能感兴趣的产品,播放音乐时推荐可能感兴趣的曲目等。随着互联网技术的发展,越
随着信息技术产业的飞速发展,出现了大量的遗产软件.这些软件被维护了很长时间,软件结构日趋混乱.而且由于新技术、新需求的产生,必须对这些软件进行更新.然而全新开发一个系
在中国,电子商务目前处于打造基础的阶段,企业对电子商务从概念转向务实.有条件的企业在关注电子商务发展动态的同时,还用电子商务相关的现代供应链的理念打造企业的框架.而