基于访问热点的pNFS元数据服务器集群优化技术研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:lhm136
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
高性能计算及网络技术的飞速发展给文件系统提出了越来越高的要求,文件的快速存储及访问成为提升系统整体性能的重要方式。分布式文件系统将文件的数据流和控制流分开,可以加速文件的访问速度。然而随着系统规模的持续增长,元数据服务器面临的压力也越大,在这种情况下,一般使用元数据服务器集群来有效的提升元数据访问的效率,增加整个系统的可靠性。围绕元数据服务器集群技术,在研究了当前的元数据管理与组织方式的基础上,深入分析现有的基于静态子树的p NFS元数据服务器集群,指出系统不能使集群中的服务器的负载达到比较均衡的状态。基于文件访问的不平衡特性,针对静态子树元数据管理技术的不足,提出了创建热点元数据子树多副本方法,将元数据的访问进行统计,找出读取热点,创建别名,在不改变静态子树划分结构的基础上,将热点元数据分发到元数据集群中的所有机器上,并形成独立子树,确保其可以同时提供服务。该方法在客户端访问热点元数据时,可以根据元数据服务器负载情况完成元数据的访问,增强并行服务能力,用较小的代价解决了元数据服务器集群由于静态子树划分而引起的局部负载过高导致的性能瓶颈问题。测试结果表明,在由4台机器组成的元数据集群中,在5层目录且只访问热点元数据时,改进后的系统可以提升近3倍的吞吐量。在Saskatchewan-HTTP负载测试中,系统的吞吐量也有32.7%的提升。同时,系统的负载均衡性比改进前的系统要好。访问热点子树多副本技术可以起到提升系统性能并平衡负载的作用。
其他文献
随着移动互联网技术的快速发展,智能手机、平板电脑等移动设备也得到了广泛使用。移动设备在网上购物、在线支付、转账等方面具有方便、快捷的特性,网上电子商务交易量越来越
关系数据库系统,由于其在商业领域的主导地位以及关键技术的成熟性,成为管理数据的一个有效工具,在关系数据库的基础上进行数据库加密和密钥管理是本文研究的重点。本文的主要贡
椭圆曲线密码系统(ECC)的安全性依赖于椭圆曲线离散对数问题(ECDLP)的难解性。与整数因子分解问题(IFP)和一般离散对数问题(DLP)不同,目前求解ECDLP的算法都是全指数时间复杂
网络事件过滤器是一种用来针对各种日志文件进行事件过滤的程序,它使得我们可以在众多的复杂事件中发现并找到网络故障的根源,这也是解决网络安全和故障问题的一种极好的分析
  随着计算机与网络技术的发展,特别是在Internet应用日益普及的情况下,现代企业的信息系统的分布性、异构性的特征越来越显著,集中式工作流即将成为过去,工作流的互操作成为一
现代智能家居的目标是用现代电子技术、通信技术、计算机及网络技术、自动化技术来提高人们的家庭生活质量,使现代家庭变得舒适、安全而充满快乐。智能家庭网络随着微电子技术
计算机安全问题是信息化过程中急需解决的问题,而安全漏洞的发现对于保护系统安全有着非常重要的意义。通过使用漏洞扫描技术可以检测网络系统潜在的安全漏洞,使网络管理员可
随着Internet的迅速发展,网上信息资源越来越丰富,网络已经成为人们获得信息的必要途径和重要手段,但是这种网上信息浩繁,具有分布、动态变化、结构复杂等特点,使得用户根本
本论文主要阐述了网络内容分析与监控的相关技术以及基于Linux系统平台的一个原型系统的设计与实现。网络内容分析与监控技术包括数据包捕获和预处理技术,应用层协议数据分析
定性空间推理主要是对几何形状或者运动性质进行定性推理,是利用空间理论和人工智能技术对空间对象进行建模、描述和表示,并据此对空间对象间的空间关系进行定性分析和处理的