广域网数据访问技术研究

来源 :中国科学院高能物理研究所 | 被引量 : 0次 | 上传用户:x1026221496
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
新一代高能物理实验的规模和复杂性不断增加,对计算环境提出了更高的需求,计算特点主要表现为高性能计算、海量存储和高速网络。高能物理是数据密集型计算,计算是围绕着以海量的实验数据为中心进行的。面对物理上广域分布的异构并且复杂的计算设施,如何高效、快速、方便地获得自己想要的数据,成为了高能物理学家用户最关心的问题。本文针对高能物理应用的特点,以实际部署应用的海量存储系统和网格计算平台为基础,对广域网数据访问技术进行了深入研究,解决实际中面临的应用问题。本文的工作和主要贡献包括:   (1)提出了基于WEB服务的广域网文件I/O,实现异构存储系统间的数据互操作。对WSIO性能进行了优化,提供了GSI安全支持和本地文件系统接口。提出了通用文件访问接口GFAI,解决WSIO对不同存储系统的扩展和支持。   (2)提出了GridFTP数据存储接口框架,快速实现对不同存储系统的支持,提供一种基于GridFTP的存储系统互操作途径。   (3)提出了基于信息熵的会话识别模型,可识别更自然的会话边界。实验数据显示,这种算法不仅比时间阈值、最大向前引用等会话识别模型的识别精确度高,且具有良好的通用性,从而提高训练数据的质量。   (4)提出了ULNS文件预测模型和GFPM文件预测模型,挖掘用户的使用模式和数据的内在关联,据此进行文件访问预测和预取,对Cache进行管理。实验表明,这两种模型可以有效提高Cache命中率,减少数据访问延迟。   (5)提出了主动数据服务,有效解决了存储系统中数据事件处理的效率问题。这种模式可以应用于高能物理实验数据的分发,实现物理实验数据及时、快速地在地理上分布的各个合作机构之间共享。   (6)提出了基于语义的数据访问方式,利用本体来描述数据语义,根据语义描述来查询和访问数据。与传统的数据访问方式相比,该方式符合人们的思维模式,大大提高了数据查询效率。
其他文献
磁共振定量成像(qMRI)在序列优化,临床应用,药物研发等方面具有重要的价值。一直是磁共振物理学家,放射科大夫和研发工程师关注的重点。然而,传统的定量成像方法扫描时间太长,影响
随着电子商务的普及,快递行业进入了迅猛发展的阶段,但是随着快递数量的不断增加,快递员在派件时因收件人不能及时签收而导致的“人等人”现象,以及快递服务网点高昂的运营成
由射流泵和主泵组成的射流装置,不仅结构简单,可靠性高,且适用于放射性及易燃易爆等特殊环境。将射流装置引入小型压水堆一回路系统中,有助于提升反应堆的固有安全性。反应堆强迫
一个秋高气爽、金菊飘香的日子,我们前往著名的道教圣地武当山游览.映入眼帘的那远古建筑群、起伏的群峰峭壁、涧水树林……仿佛是一本内容丰富、博大精深、令人心旷神怡的历
期刊
随着工业技术的高速发展,齿轮箱越来越受到人们的普遍关注。汽车、机车及船舶的运转都离不开它。齿轮箱通常由轴、齿轮、轴承以及箱体等零部件组成。齿轮、轴、轴承的健康状态对机械设备的正常运转起到了关键的作用。文章由传统的测振方法引出本文的工作重点。先对一般的时频分析法进行了介绍,在此基础上将小波分解法应用到信号的消噪中,相比傅利叶消噪具有明显优势。针对机械故障数据的信息量大等特点,引入基于EMD特征提取思
光伏产业高速发展对太阳能电池的快速测试分选提出了迫切需求。运动控制系统是太阳能电池测试分选设备的重要支柱,完成电池片在各个机构之间快速、稳定地传递,多轴协同运动的速度和精度直接关系到测试分选的效率和一致性。以太网的高带宽足以支撑高频率的数据交换,成为运动控制网络发展的一个理想解决方案。但是,将以太网用于运动控制网络领域也引入了一些新的挑战,主要表现在网络的非确定性和网络中时间同步、网络诱导延时等网
HIRFL-CSR(兰州重离子加速器冷却储存环)的控制系统由磁场电源控制系统、真空控制系统、高频控制系统等许多子控制系统所组成。这些子控制系统协同工作,以保证HIRFL-CSR的正常
高光谱图像具有丰富的空间、辐射和光谱信息,在数据获取、传输、分析过程中,数据量的增加对传统数据采集压缩提出了新的挑战;同时由于地物本身、空间分辨率、大气环境等因素的影响,混合像元现象普遍存在于高光谱图像中,混合像元分解不仅能获取像元真实信息,也有助于图像分类、地物分析等应用。本课题围绕建立基于压缩感知的高光谱混合像元分解以及基于像元线性混合模型进行重构的方法,对信号稀疏表示、压缩感知、混合像元分解
第三代同步辐射光源由于具有高电子能量、低发射度等特性,以及大量选用插入件作为光束线光源,高热负载、高精度及高稳定性的需求对光束线设计建造提出了更高的挑战,本论文在开展
汽车同步器是解决汽车换挡时发动机转速与变速箱转速不一致的机械装置,其中齿圈是同步器的重要零件之一,其制造质量的优劣直接影响汽车的换挡性能。本文以汽车同步器齿圈制造