分布式文件系统中高可靠存储机制的研究与实践

来源 :北京大学 | 被引量 : 0次 | 上传用户:sosolinkweixiao
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络的迅猛发展和各种计算设备性能的飞速提高,在人们生活中使用的信息呈爆炸性的增长.大量的用户需要随时随地存储和访问自己的重要资料和数据,并且能够与他人方便地进行信息共享与交流.这一切都需要海量网络存储系统来支持数据的存储、访问和共享等.针对这种需求,我们提出了燕星2.0海量网络存储系统.该文的主要研究工作是设计并实现了燕星2.0系统的高可靠存储机制-ESStore(Erasure Store).该文提出了在燕星2.0中,基于P2P网络使用Erasure codes对文件进行编码存储,并对相关问题进行了研究和设计,包括文件存储、访问和删除的基本过程,以及数据校验、多个复本的一致性维护、修复和垃圾碎片回收的基本机制,并对原型系统的可靠性、可用性、冗余度、存储性能和各种参数如何选择进行了理论分析和实验评测.使用ESStore存储机制的网络存储系统具有高可靠性、高可用性、数据完整性、易扩展以及保密性等特点.该文还提出了一种在P2P系统中寻找低错误相关的服务器节点集合的方法.这种方法可以被使用类似Erasure codes冗余机制的P2P网络存储系统所使用,从而提高系统在实际应用中的存储可靠性和访问可用性.我们对此方法进行了实验分析,验证其有效性和可行性.
其他文献
目前利用虚拟现实技术实现数据中心可视化来管理数据中心已经成为趋势,数据中心三维可视化为管理人员提供了一种有效的机房管理方式,但搭建三维场景的同时也具有场景复用性差
输入法的原理是利用某种特定的方法,将汉字信息的各种表现形式转换为计算机可以接受的内部表示形式.其中拼音键盘输入法是把汉字信息输入计算机的主要手段,也是中文信息处理
无线传感器网络(WSN,Wireless Sensor Network)的应用越来越广泛,例如在火警预报、环境监测、燃气抄表等领域提供了便捷性和安全性保证,对人们的生活影响很大。数据收集是无线传感
EJB(Enterprise Java Bean)是为开发和部署基于组件的分布式应用而定义的组件体系结构。与其他组件技术相比,EJB组件具有可扩展性、事务性和并发访问安全性,而且EJB组件使用纯J
我们当前面临着信息爆炸的时代,如何从海量的信息获得所需要的成为人们在信息时代所面临的主要问题之一。随着信息检索技术研究的深入和应用的扩大,用户对检索的要求越来越细,研
为了防止自然灾害和减少自然灾害对财产保险造成的损失,需要根据当前和未来财产保险防灾减损的需要,建立科学的灾情预测模型和财产损失评估模型。综合利用遥感、地理信息系统和
空间数据库中查询的优化是人们关心的问题,最近邻查询是空间查询研究中心的难点和热点,反最近邻问题是最近提出来的一个概念,是最近邻问题的扩展,如何有效实现空间数据的反最
该文主要阐述了"嵌入式Linux平台下ModBus协议通讯控制模块"的设计原理与实现技术,其研究目的就是试图解决远程集散式测控系统和信息产品中通讯的实用性与通用性问题,开发出
爆闪式信号灯由于体积小,能在短时间内发出强光,具有很明显的警示作用,广泛用于机场导航、航空指示、道路交通、特种车辆(警车、救护车、消防车、工程车)等场合,有效地警告各种隐患,避免各种事故的发生,很好的起到了防患于未燃的作用。因此国内外生产厂家不断地开发出新产品,一是改变产品的外观造型,二是改善内部电路,使产品具有高可靠性、高稳定性、高性能价格比。本文详细讨论了在现有信号灯的基础上,设计出一种寿命长
随着计算机网络飞速发展, 网管问题越来越引起人们的重视, 其中服务质量的保证以及业务管理成为这一领域的关注焦点,用基于策略的思想来管理QoS网络成为近几年迅猛发展的网管