云计算平台中数据存储与文件管理的研究

被引量 : 33次 | 上传用户:zy1yi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着数字技术和互联网的快速发展,互联网提供的服务种类越来越多,需要处理的数据量也越大。如何处理好海量的数据与服务,有效地为用户提供方便、快捷的网络服务日益重要。云计算的到来为解决海量数据问题提供了良好的途径,它提供了安全可靠的数据存储、方便快捷的互联网服务和强大的计算能力,改变了传统以PC机为基础的生产模式,最终改变人们获取信息。同时,随着云计算的推广和流行,如何高速率、低成本储存和管理生成于云端的大量数据,也成为了各大企业和组织研究重点,这就需要有良好的云结构设计、数据存储及处理模式和云存储平台的设计目前的云计算平台中的存储设计主要有Google的GFS和Hadoop的HDFS。但是,在GFS和HDFS中在都存在节点失效的问题。节点失效将对云平台带来不利影响,尤其是服务器节点失效影响更大。因此解决单节点甚至双节点同时实效成为一个重要的问题。针对节点失效这个问题,本文拟采用云计算与P2P相结合的方式搭建架构平台,即在存储数据的节点之间与其子服务节点之间采用云计算方式存储,在服务节点之间采用全分布式非结构化拓扑使得服务节点S之间是完全对等的模式,也就是一种混合拓扑结构模式。采用全分布式非结构化拓扑的非结构化系统中,出于冗余度以及延时的考虑,大部分DHT总是在节点的虚拟标识与关键字最接近的节点上复制备份冗余信息,这样也避免了单一节点失效的问题。这种混合拓扑结构模式可以有效的解决服务器节点失效的问题,构建可信服务器节点的云计算基础架构。同时,由于云计算中心需要面对的应用种类、数量和规模是前所未有的,所以应用及用户隔离技术是云计算中心需要考虑的问题。在隔离技术上数据的隔离是最为重要的,我们采用一种目录映射的单向指针分层用户隔离的方法以便于有效地实现了用户数据的隔离。接着,本文重点分析并给出云计算平台中数据存储方式,不同于关系数据库的、适用于云计算的一种基于列模式的映射数据存储模式,这种模式的数据表结构它是一个稀疏的,分布的,持续多维度的排序映射数组。最后,给出云存储平台设计的系统结构和分布式存储流程以及系统管理节点、子节点和客户端节点的模块设计
其他文献
本文旨在研究东望政策对中国与津巴布韦关系的意义。该研究主要目标之一是分析该政策是否是两国关系的催化剂。本文试图解决的问题是,东望政策是否对中国与津巴布韦之间的关
本文基于国内外现状分析了我国货币政策取向和宏观经济形势,预计2019年国内经济仍然面临下行压力,美国等海外经济体的经济也将出现逆风,因此国内将通过积极的财政政策和适度
摘要:交通网络设计对于提高网络功能,优化资源配置,改善用户出行条件等发挥重要的作用,在近几十年的发展研究中取得了极大地进展。本文在分析和总结现有交通网络设计研究成果
文言文是中华文化的重要组成部分,是高中语文教学的重中之重,针对文言文教学死气沉沉的现状,如何激发学生的学习热情成了广大教育工作者需要思考的问题。而真正有效的文言文
宫廷礼貌是西欧中世纪社会文明进步的一种表现形式,在贵族宫廷中酝酿并发展起来。骑士作为宫廷生活的主体,是礼貌最主要的代表者和实践者。中世纪盛期,政治相对稳定,经济较为
随着人们生活水平的提高,食品安全日益受到社会的关注。剧毒、高毒杀虫剂用量过大是造成蔬菜残留量超标而引起中毒的客观原因,而目前的洗涤剂本身就是化学制剂,对人体健康有
城市开放公园是城市绿地的重要组成部分,是城市文化的重要载体,在城市生态建设和环境保护及市民的日常生活中起着十分重要的作用。以往设计师对于城市开放公园的设计大都是从
近年来,我国的口语交际教学在理论研究上有了一定的进步,同时很多一线语文教师也开始注重在教学中开展口语交际活动。但是,现在中学专门的口语交际课程开设情况并不乐观,很多
玉米秸秆作为饲料具有很高的营养价值,随着畜牧养殖业的快速发展,对玉米秸秆饲料的需求量在不断增加。为了实现在玉米摘穗收获的同时将秸秆揉切打捆,将现有玉米收获技术与茎
全自动LED引线键合机是集精密机械、自动控制、图像识别、光学和超声波热压焊接等多领域技术于一体的现代高科技微电子后封装设备,主要用于芯片焊盘和外框架间引线的焊接。其