一种基于公有云的数据管理系统设计与实现

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:javaoak
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网技术的不断发展,网络中的数据成指数级快速增长,数据存储的规模急剧扩张,数据存储技术面临巨大的挑战。云计算技术给IT行业带来了一场新的技术革命,它的出现为解决数据存储问题带来了新的思路。利用云计算技术存储企业数据最常用的方案是采用“公有云”,“公有云”具有高扩展性、自动容错性、易于管理性和廉价性等优势,可以有效地补充企业数据容灾备份带来的额外开支。但是目前的“公有云”存在两个问题:一是传输速度慢,即企业数据不能及时备份到“公有云”上;二是数据安全不能保证,企业核心数据的私密性在“公有云”上得不到保护。本文针对“公有云”在企业数据存储等方面的不足,设计并实现了一种介于企业内部和“公有云”存储平台之间的近客户端的中间件——CloudKey,主要用于企业数据的备份和管理业务。本文的主要研究内容和取得的研究成果如下:(1)本文综述了国内外云计算和云存储技术相关领域的研究成果,根据数据存储的现状,提出了一种解决数据存储中的数据备份和管理的解决方案。(2)详细研究和分析了数据存储系统中所涉及的关键技术,主要包括重复数据删除技术和加密技术。通过实验评估了CloudKey系统的去重率和加密性能,验证了系统备份和数据管理的高效性。(3)本文设计一种中间件的解决方案,将本地工作集和云端备份存储分离开来,将数据存储分为:数据预处理、资源管理和调度、数据存储、数据加密和备份。数据存储采用元数据和数据内容分离的机制,卖现了元数据信息的集中式管理和数据的分布式存储。利用公有云存储平台备份本地数据,保障数据的可用性。在数据备份之前对数据进行加密保证数据的私密性,解决了数据的安全问题。通过本地工作集缓存数据,闲时备份到公有云上,解决了直接连接公有云速度慢的问题。
其他文献
TCP/IP网络技术在网络系统的广泛应用促使了网络管理的产生和发展.ISO定义网络管理的方法和管理框架作为OSI(Open System Interconnect)的一部分.对于基于ICP/IP的网络,简单
传统的联机事务处理大多是基于主机/终端的客户/服务器模型的。在这种模型中,用户在终端主要以Telnet远程登录的方式向服务器提交事务请求,服务器接收用户请求并调用相应的服务
该文在深放分析研究数字化家庭网络的特点和需求的基础上,提出了一个数字化家庭网络管理模型HNMP,用于对家庭网络内的设备进行管理和控制.该模型具有简单、扩展性强和易于实
当今Internet上企业级应用迅速发展,许多商业服务由传统媒体向Internet上转移,许多大的商业公司都看好这个巨大的网上市场,希望快速开发出高质量的网上商业应用系统,同时用户的系
该文首先分析了传统检索系统的局限性和目前构件检索系统面临的问题,然后介绍了该课题实现的基于分布式资料环境的支持多种检索方法自动转换的可重用构件库检索系统ATSS的设
该论文在对USB协议研究和分析的基础 ,采用V-model的软件工程方法,设计和实现了嵌入式平台(VxWorks)的USB协议,包括:USB设备端驱动程序、USB的host端协议栈、和基于协议栈的
随着信息化在人类社会的迅速发展,大量的信息在网络中进行传输的同时,各种各样窃取信息的手段、工具也越来越多,信息泄露事件层出不穷。政府、金融、银行以及企业的信息化步
该文首先提出了一种应用于分布和并行环境的数据挖掘的计算框架DDCA,详细描述了该框架的思想.之后在此计算框架的基础上提出了一种数据挖掘实现算法DDCP,该算法以大规模事务
在该文中,我们对机群合作缓存中的缓存分配机制、分布式缓存管理方案以及统一合作缓存的模型提出了新的想法.(1)提出了针对合作缓存系统中的缓存块表目的加强Hash表的方式可
该研究了企业对象动态建模技术在企业对象分布式动态管理过程的作用和实现策略,并运用面向对象和软件复用技术建立了基于Web工作流的企业对象动态建模系统BODMS,该系统是在特