AMS科学活动中的数据管理技术的研究和实现

来源 :东南大学 | 被引量 : 0次 | 上传用户:roadog212
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
AMS科学活动所产生的数据正在以PetaByte的量级爆炸性地增长,如何高效地管理这些高度分散的海量科学数据已经成为AMS科学活动中的一个巨大挑战。为了应对这一挑战,AMS数据分析和处理中心采用数据网格作为AMS科学活动中的数据和存储资源集成平台。基于数据网格的AMS海量科学数据管理是本篇论文的研究重点。本文提出了两个数据管理模型——基于虚拟数据集的数据管理模型和基于市场经济原则的数据管理模型。并在这两个模型的基础上,提出了一种E-Science科学活动的通用数据管理结构,重点研究了数据管理体系结构中的三个关键技术:元数据管理技术、副本管理技术和数据移动技术。最后,通过整合这些关键技术,建立了一个基于数据网格的Monte Carol仿真数据管理原型系统。该系统将网络上分布异构的各种存储资源集成在一起,形成虚拟的存储环境,为上层应用提供统一的web访问接口,达到了数据的高度共享。同时,该数据管理系统也可以推广到其它数据密集型应用领域,例如天文学、生物信息学等等,为这些领域的海量数据管理提供强有力的支持。
其他文献
SoC(Systems-on-a-Chip)系统目前应用得越来越多。一个SoC系统可以包含不同的功能模块,例如数字电路、模拟电路、硬件专用电路、存储器、微处理器、数字信号处理器DSP(Digital
论文首先就PSTN与IP的互联互通在下一代网络发展过程当中扮演的重要角色入手,并结合现有解决方案的缺陷,提出中继服务器的模型。中继服务器首先可以作为信令网关,完成PSTN网络的
随着大数据时代的到来,各行业数据大量累积,目前人们尚未对这些海量数据进行足够深层次的分析应用,数据挖掘技术便在此背景下应运而生。本文在研究了数据挖掘中聚类算法的研究现
随着计算机及网络技术的发展,无纸化考试这种考试形式得到了越来越广泛的应用。无纸化考试所具有的方便、快捷、效率高、防止试题泄露等优点,是传统考试手段所无法比拟的。在网
随着信息技术的飞速发展,数据挖掘在许多领域所起的作用越来越重要。在数据挖掘的各个分支中,关联规则挖掘和分类挖掘是两个高度活跃的领域,其应用范围也非常广泛。而关联规
随着计算机技术、网络技术、通信技术的不断发展和进步,通过网络实现办公已经变得非常普遍。人们在享受办公方便的同时,也受到了信息安全问题的困扰。网络“黑客”的攻击手段
为了提高签名效率、保护用户的隐私、解决数字签名的授权以及数字信息的安全传递,开展基于群体的数字签名和代理签名的研究不仅具有重要的学术价值,而且还对国家安全和信息化建
本文首先对几种经典的迭代算法进行了简单介绍,包括牛顿法、拟牛顿法等,并针对这些方法的不足,分析了块Broyden方法的优点。然后介绍了预处理技术的出现原因以及发展历史,分析了
AMS(Alpha Magnetic Spectrometer)太空磁谱仪实验是丁肇中教授领导的由美、俄、法、中等15个国家和地区共300多名科学家参加的大型国际合作项目,其目的是为了寻找由反物质所
随着计算机、通信,特别是人工智能理论与技术的发展,目前关于多主体协作的理论与应用研究已成为多学科和AI交叉研究中的一个前沿课题。在多主体系统中,由于单个主体的能力有