基于Hadoop的分布式对称加密数据存储的分析与研究

来源 :西安科技大学 | 被引量 : 0次 | 上传用户:chen95127
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网技术和分布式数据存储的高速发展,企业对云平台使用越来越普及。与此同时,人们对于自身存储在云平台的数据安全的关心程度也前所未有,对云平台上存储的数据安全有了更高的要求。Hadoop能够让用户轻松架构和使用分布式平台,然后通过该平台对大量数据进行分布式处理。但是基于Hadoop的分布式数据存储目前存在着很大的安全隐患,缺少对静态数据的加密保障,在安全方面只关注了数据的验证和备份等部分,并没有注重数据本身的安全性,因此频频爆发安全问题。本文研究的主要内容就是将加密技术应用到Hadoop云平台中,能够实现对存储在Hadoop云平台的数据进行分布式的对称加密和解密。首先,本论文在介绍了云计算和分布式数据存储的国内外研究现状和发展趋势后,对Hadoop开源平台的两大关键技术:分布式文件系统HDFS(Hadoop Distributed Filesystem)和用于处理海量数据的编程模型MapReduce做了详细的介绍。其次,通过对现有加密算法的对比,分析传统分布式数据存储和Hadoop分布式数据存储存在的问题,本文结合Hadoop分布式云计算框架中的的MapReduce模型,总结得出了基于Hadoop的分布式对称加密数据存储技术,并进行了简要的分析。然后,从整体上对数据的分布式加密和解密各个模块进行了设计,并详细介绍了用MapReduce实现对称加密AES(Advanced Encryption Standard)算法过程,特别是着重介绍和设计了能够实现该算法的Map函数和Reduce函数。最后,在实验室内搭建Hadoop集群,并且通过该云平台,来实现加密和解密过程,并对分布式对称加密算法进行功能测试、扩展性测试和效率测试,验证整个流程。通过比较测试数据给出仿真性能分析,提出优化问题,并对工作进行了总结和展望。
其他文献
随着集成电路规模和复杂度的急剧增长,验证已成为当前集成电路设计中最困难、最具挑战的课题。验证的工作量和消耗的资源已占集成电路设计总体工作量和耗费资源的80%以上。但
期刊
科技的发展大大提高了人们的生产效率和生活水平。随着社会的发展,许多科技发明和产品应运而生,而这些发明和产品有大量都是基于嵌入式系统的。嵌入式系统是以应用为中心、以计
扩频通信系统由于具有通信距离远、通信容量大、传输质量好,保密性强等优点,在现代通信系统中具有广阔的应用前景。随着软件无线电以及超大规模集成电路技术和电子设计自动化
随着社会的发展和技术的进步,国内电信企业对业务运营支撑系统的依赖性越来越强,要求也越来越高。电信运营商正面临着许多的挑战和机遇,客户和业务日趋丰富和多样化,导致运营商的
电子稳象是一种新的稳象方法。相对于传统稳象方法,它具有精度高、体积小和成本低等特点。电子稳象主要通过运动估计和运动补偿技术来实现图象序列的稳定。传统的电子稳象系
近年来随着传统制造业的转型升级,工业自动化技术的大规模应用,尤其是在半导体和消费电子产业。产品大批量生产、对质量和加工精度要求越来越高。在这种情况下要求检测设备也
网络控制系统是控制科学、计算机及网络技术的综合应用。网络资源的竞争及网络时延赋予传统的控制理论和方法新的含义和研究内容,对网络控制系统调度的研究是其中重要内容之一
作为一种新型宽带无线通信技术及下一代光通信发展方向之一的无线光通信,结合了微波通信和光纤通信的优势,具有频谱资源丰富、信息容量大,抗电磁干扰、保密性能好、设备轻便