基于OpenStack的大数据PaaS服务的设计与实现

来源 :西南交通大学 | 被引量 : 0次 | 上传用户:chxiang007
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网应用的快速增长,出现了大量的数据整合和聚集现象使得数据处理应用的需求量呈爆发式膨胀,加快了“大数据时代”的到来。伴随着数据种类的丰富多样和数据规模的不断扩大,数据的分析和处理技术也在不断进行着改进,出现了很多的大数据处理软件。但是搭建和部署一个大数据集群对于中小企业来说在经济上和技术上都是一大笔的开销。将大数据处理软件集群部署在云平台上,从技术层面,云计算技术解决了上层应用和底层的计算资源松耦合;从业务层面,使用大数据处理软件进行数据处理的人员可以只关注业务的处理,大数据集群则交给第三方云提供者进行维护管理。本论文就是依据新华三云计算部门和大数据部门进行云数融合的迫切需求,设计并实现了基于OpenStack的大数据PaaS(Platform as a Service)服务模块,以PaaS服务的方式将大数据处理软件集群提供给用户。大数据平台即服务(Big Data Platform as a Service,BDPaaS)通常用于指对大型或复杂数据集(通常通过Internet)进行分析的服务,即云托管服务。作者针对大数据处理软件集群部署过程繁杂,管理困难的问题,基于OpenStack云操作系统和私有云平台(H3CloudOS)实现了在云平台部署大数据处理软件集群的大数据分析模块。作者首先通过阅读OpenStack中Sahara组件源代码,对OpenStack所提供的大数据服务解决方案进行了详细的分析与理解,然后对私有云平台CloudOS的整体架构进行介绍,并对私有云平台已实现的功能进行了学习。作者结合OpenStack和CloudOS所实现的功能,对大数据PaaS服务进行需求分析和概要设计。然后根据设计对大数据PaaS服务进行了实现,最后的上线测试表明,本论文的设计与实现能够在CloudOS私有云平台上提供大数据处理软件集群,满足项目需求。本论文的大数据PaaS服务主要实现了在CloudOS私有云平台进行大数据处理软件集群的CURD(Create、Read、Update、Delete)等工作。本文的工作重点是设计过程中的几个关键点:(1)大数据PaaS服务与OpenStack和CloudOS中各个组件之间如何使用HTTP协议进行交互;(2)OpenStack大数据集群部署的过程较为复杂,如何简化操作,使用户方便快捷的获取集群;(3)CloudOS对OpenStack中的用户模块进行了优化和改变,如何在大数据PaaS服务中进行体现;(4)如何设计与实现操作简易、功能明确的可视化界面。
其他文献
目的:观察和探讨耳穴埋豆联合艾灸对于治疗脑中风后便秘的有效性。方法:选取临床上60例脑中风后出现功能性便秘的患者,随机分为治疗组和对照组。对照组患者给予常规护理;治疗
目的:通过对临床上患者的观察,以及总结对治疗肠梗阻患者的治疗经验,运用针刺联合电针方法治疗粘连性不完全性肠梗阻,观察其疗效,并收集临床资料加以分析,对分析结果进行讨论研究,希望可以为临床治疗相关疾病提供可靠地数据参考。材料与方法:本项研究选取2017年1月份至2018年12月份就诊于辽宁中医药大学附属第四医院普外科粘连性不完全性肠梗阻患者60例,采用随机与对照的研究方法,将60例患者随机分为治疗组
田径运动是原始、最简单的运动。田径社团的教学活动,不仅使学生身体得到充分锻炼,还可以使学生学会顽强拼搏的竞技精神,但从近几年来看,小学田径社团的开展情况并不理想。本
在本文中,我们主要研究了半环<R+,+,·,0,1>与可消去的yoked半环上生成子半模的基与维数,并且对L-半模的线性变换进行了详细讨论,全部论文分为三部分,具体内容如下:第一部分,
随着无线通信技术的发展,对无线通信设备的性能提出了更高的要求,要在单片集成电路上实现接收、发射和基带信号处理功能,这能够很大程度上降低成本、功耗和体积。目前实现数
我国宪法和法律赋予了民族自治地方税收管理自治权。从建立公共财政体制和发展民族经济出发,民族自治地方税收法律制度亟待改革。要着重从中央与民族自治地方税收权限的划分
目的:探讨与分析人性化护理在急性心肌梗塞患者中的应用价值以及对患者急性期心理状态的影响。方法:随机选取本院2014年1月~2017年12月期间内接收的120例急性心肌梗塞患者并将
纵观历史性碉楼建筑在国内的分布情况,从建筑集群、规模和形制特征来看,较为突出的历史碉楼主要有四川茂县的羌族邛笼,甘孜、阿坝地区的藏族碉楼,广东的开平、台山及凤岗碉楼和湖北罗田县的金家河碉楼。从碉楼建筑的独特性及其影响来看,2007年申遗成功的广东开平碉楼当之无愧地成为世界上中国国内历史碉楼建筑最具代表性的名片。而开平碉楼所处的开平市,文化底蕴深厚、地理位置优越,连接珠港澳,是著名的华侨之乡、艺术之
农村宅基地是农村土地的重要组成部分,与农民有密不可分的联系。随着我国城镇化进程的加快,农村宅基地退出成为推进城乡发展的必由之路。安徽省作为农业和劳动力输出大省,人
目的:探究小承气汤配合中药穴位贴敷治疗中风后便秘的临床效果,为临床提供指导。方法:以2014年10月15日-2016年10月15日来笔者所在医院就医的96例中风后便秘患者为本次研究的