网格环境下基于多数据源的数据传输

来源 :浙江大学 | 被引量 : 0次 | 上传用户:aote_jeanny
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数据密集型的科学与工程应用(如计算力学数值模拟、气象预测)需要在广域、分布式的计算环境中快速安全的传输海量的数据。因此在如何网格环境中高效、可靠、安全的传输海量文件是网格计算中的一个关键性研究课题。 本文所构建的网格环境下基于多数据源的数据传输工具MFTP是MASSIVE(Multidisciplinary Applications-Oriented Simulation and Visualization Environment)网格平台的重要组成部分。MASSIVE旨在构建面向多学科应用的模拟与可视化网格环境。MASSIVE网格平台处于工程应用与网格中间件之间,为用户提供一个图形化的网格应用集成开发环境,它建立在Globus Toolkit中间件之上并支持基于网格的计算流体力学与计算固体力学问题求解及可视化。 本文所论述的MFTP利用网格环境下存在的多个数据备份Replica,提出了一种基于Replica级别的并行传输方法以提高数据传输的性能。它的流程如下:用户输入一个逻辑文件名,MFTP调用网格的复制定位服务(Replica Location Service,RLS)获得文件所在的实际的物理存储地址(physical locations);MFTP利用GridFTP提供的安全认证,部分文件传输,并行传输开始与用户选定的Replica进行安全认证并创建一个或多个数据通道,按照Replica负载量算法决定各个Replica的数据传输量大小传输数据块;最后MFTP根据各个数据块的偏移地址重新合并文件。MFTP在提高数据传输性能的同时,应用了GridFTP所具有的GSI(Grid Security Infrastructure)及Kerberos安全认证机制,因此它同时具备了GridFTP所具有的安全性能。实验表明,MFTP具有较好的数据传输性能和安全性能。
其他文献
在生物医学领域,由于Web数据源的大量涌现及其高度的异构性和自治性,加上生物信息本身所蕴含的复杂的领域联系,仅从语法和结构上进行信息集成难以满足应用的需要,从语义角度
云计算是伴随互联网的蓬勃发展应运而生的一种新型计算方式,它突破了传统计算的局限,增强了当下急需的计算能力,同时又提供了灵活的可扩展性。云应用是基于云计算思想实现,并部署
网格技术在图像处理领域的应用,可以较好地解决图像处理应用与高性能计算之间的矛盾。而网格环境广域、异构与动态特性以及图像处理数据量大、计算密集的特点,导致图像处理网格
数字化校园是利用计算机技术、网络技术、通讯技术对与学校教学、科研管理和生活服务有关的所有信息资源进行全面的数字化,并用科学规范的管理对这些信息资源进行整合和集成,以
近年来,数字化技术的不断发展、成熟和完善,为发展新一代的数字视频采集、图象处理、分析识别系统提供了有利条件。使其不再仅仅局限于工业生产,而是越来越广泛地应用于日常
随着网络的发展,信息量在不断增长,人们对信息的安全要求越来越高。人们想出很多种方法来实现数据的安全存储和传输,以及用户身份的安全认证。目前数据库在用户账户管理、验
这篇论文主要讨论了生物学领域中海量的DNA序列拼接问题和多个蛋白质相互作用网络中保守结构挖掘问题的相关关键技术及实际应用。提出了基于最大频繁序列模式的聚类方法,将DNA
入侵检测系统通常包括事件产生器、事件分析器、响应单元以及事件数据库四部分。其中,事件分析器又是我们入侵检测技术的关键部分。在网络入侵检测系统的事件分析器中,截获网
随着互联网规模和复杂程度的迅速增长,网络安全的重要性不容忽视。入侵检测系统作为一种能够主动检测计算机系统或网络上入侵行为的系统,成为网络安全的重要组成部分。它是继
随着Internet网络规模的迅猛发展和新业务的大量涌现,如何优化网络资源的利用率,平衡网络链路之间的负载,改善网络服务质量(QoS)成为当前需要迫切解决的问题。IP协议是一种面