分布式环境下的并行I/O与核外存储的研究与实现

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:sidagongsi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
该文着重基于分布式存储系统的并行I/O模型和核外存储策略的设计与实现.首先,该文阐述了并行I/O的系统结构,文件系统的结构与特性,典型的并行文件系统,并行I/O库的发展,以及并行I/O中所用到的典型的优化技术.然后,介绍了基于分布式存储系统的并行I/O模型.最后,介绍了该模型的实现方案.该方案使用并行计算的数据划分原则,将全局数组文件按照某种策略划分为若干个局部数组文件,分别存储在各节点机上.利用分布数组描述结构完成了全局数组文件到局部数组文件的映射问题.针对数据划分带来的数据一致性问题,该方案采用了写直达的策略来维护各节点机上数据的一致.该方案充分利用了C++提供的面向对象的强大功能,在编译层面上将用户的数据请求转换为对具体节点机数据的读写,增强了方案的可移植性,实现了底层操作对用户的透明性.在数据映射中,采用端口监听与线程化处理,提高了效率.
其他文献
该文详细描述了一个所设计的面向医疗应用与研究的数据挖掘构件库的结构框架,然后针对目前关于量化关联规则挖掘算法的不足,提出了一个QFP-tree算法,模拟医疗数据的结构和分
视频数字图书馆是数字图书馆的一个重要组成部分.目前在这个方面已经做了大量的工作,并出现了许多原型系统和商用系统.但这些系统都把重点放在视频理解与视频处理上,而在数据
该文的工作主要包括以下六个方面:1)结合当前的网络安全现状,研究了国内外流行的扫描软件,重点研究了它们的实现方式和技术特点.2)TCP/IP协议是网络互联的基础协议模型,是论
该文针对传统的多级分散式采购物流管理存在的问题,通过对汽车行业采购物流模式的研究,提出采用集中式物流中心管理模式.在采购物流管理中,强调供需双方物流信息共享,从而减
首先,该文简要分析了武器系统数据通信的特点和失效模式,然后介绍了一些常用的保证数据通信可靠性的方法.其次,该文针对武器系统中多CPU组成的处理机网络,当数据收发双方在半
如今,互联网在日常生活中越来越普及,人们习惯于通过搜索引擎在大量的网络信息中查找自己需要的信息,随着网络上信息海量地增长,搜索引擎的作用日益重要,赞助商搜索拍卖应运而生。
全文共分8章,主要内容如下:第1章:简要介绍了分布式虚拟环境的概念及特征,回顾了该技术的产生和发展过程,列举了一些典型的分布式虚拟环境系统和应用领域,介绍了分布式虚拟环境
现今商务世界中网络的广泛应用,相互交流各种来源不同的信息越来越重要。然而今天大多数的应用并不是为了共享信息而设计的,甚至是用不同的语言开发的,并在不同的硬件和软件平台
随着互联网技术的迅速发展,各种社交应用改变了人们的生活方式。人们在虚拟的互联网中交流合作,形成了大规模社会网络。在社会网络中普遍存在社区结构的特征,挖掘大规模社会
不规则三角网数字模型(Triangulated Irregular Network,TIN)是用一组连续而不重复的三角形逼近地形表面,是数字地面模型中的一种主要表示方法。数字地面模型(Digital Terrain