Spreader:一种基于元数据的机群文件管理系统

来源 :2007年全国高性能计算学术年会 | 被引量 : 0次 | 上传用户:martinlt
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着机群计算能力的增长和应用的深入,机群系统中的文件数量也随之急剧增加。在拥有海量文件的大规模机群中快速搜索进而操作所需要的文件,已成为机群研究面临的重要问题。本文提出一种新颖的基于元数据的智能机群文件管理系统--Spreader。Spreader以对单机文件系统透明的方式实现了单一系统映像的机群文件管理,利用成熟的关系型数据库技术实现海量文件的快速定位,和传统的文件系统相比提供了更丰富的描述文件语义的扩展文件属性机制。实验表明,Spreader在提供了方便、灵活的机群文件查询和管理机制的同时,能够将上亿规模的文件查找性能提高到数百毫秒。
其他文献
文中针对当今大学普遍重科研、轻教学的现象,论述了教学与科研之间密不可分的关系。并且提出了一条如何将研究和教学结合起来,培养优质人才的道路:将研究引入到课堂、实践与
探讨《计算机组成原理》的实践性教学新思路方法,先分析这门课程如何合理地组织教学内容,后分析基础实验与综合创新实验的设计安排。通过引入EDA技术,实现了一种新的实践教学
计算机实验教学是相关课程教学中不可缺少的一个环节,本系为了建设高水平实验教学中心这一目标,制订了一系列的政策及相关的规章制度,注重实验教学体制的建设,加强对各类学生
会议
介绍钢制承压管件制成品协议超声检测工艺设计中的基准反射体的选择和对比试块的设计,以及设计过程中的思维路线.
任何高性能科学计算(HPC)课题都是一项复杂的系统工程,其具体的应用效率如何要受到来自硬件和软件等许多因素,主要如并行算法、流水线技术、层次存储器技术和网络互联结构等
会议
不锈钢以其耐低温、耐高温、耐腐蚀性等特殊性能在工业领域应用广泛.对于不锈钢产品焊缝的检验,除射线检测、常规超声检测外,相控阵超声检测也是一不错的选择.但不锈钢焊缝晶
基于协同式检查点的回卷恢复是在大规模并行计算机系统中得到采用的一项重要容错技术,其性能开销主要为协同协议和检查点映像存储所决定。描述了一个在MPICH2中实现的应用透
会议
石油、气象等社会重大领域存在着大量遗留下来的无法或无必要并行化的软件需与该领域并行软件并存。本文阐明了一个基于高性能计算机机群的支持串并行软件高效混合调度的并行
英明领袖华主席亲自提议召开的全国科学大会,象一股强劲的东风,吹遍浙江中医学院。广大师生员工欢欣鼓舞,斗志昂扬,他们决心在院党委的领导下,乘东风,鼓实劲,把科学研究工作
对某盘孔结构原位涡流检查方法实施过程中影响检测灵敏度的情况进行了分析和试验,结果表明探头周向旋转与Z方向偏转均会影响检测灵敏度,其中原位检查中探头的周向旋转可通过