一种基于SSD的高性能Hadoop系统的设计与应用

来源 :科技资讯 | 被引量 : 0次 | 上传用户:Vincent_Jiang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
Hadoop已经成为大数据平台的事实标准,当用户要求它成为全栈平台时,MapReduce为批处理而设计的局限日益显现。文中将SSD引入大数据的内存缓存存储解决方案,阐述了SSD和HDD的混合存储架构;同时,结合高效的计算模型Spark等优化技术,设计了一种基于SSD的高性能Hadoop系统,分别有效地解决大数据计算系统的性能问题和存储空间问题,实验性能评测显示取得了显著效果。
其他文献
研究一类不确定组合时滞系统的状态反馈鲁棒分散可靠控制问题,系统包含状态时滞,非线性扰动和参数不确定性。目的是设计分散线性无记忆状态反馈控制器,使得对于任意容许的不确定
目的:研究不同产地黄荆花的挥发性成分。方法:采用顶空固相微萃取与GC-MS技术对河南济源和湖北大别山区黄荆花的挥发性成分进行比较分析,结果:两种不同产地黄荆花挥发油中共
经济技术的快速发展促进了港口机械设备的快速发展,在这种形势下,各式各样港口机械设备也就应运而生了。因此,如何管理港口机械设备,以最大化港口经济利益,成为当前各大港口
<正>苏联,曾被新中国尊称为老大哥,中国汽车产业发端的"祖师爷",共和国长子——中国一汽就是由它援建的。直到20世纪80年代,伏尔加轿车还奔驰于华夏大地。但岁月流转,时空变
以现代城市设计理论为指导,阐述深盐路建筑改造设计的原则,方案构思及项目实施成果。
产品情感设计水平是影响用户购买决策的重要因素,产品外观特征是产品情感表达的主要形式。针对目前产品外观特征情感设计研究中存在的忽视产品的整体性、设计特征的多维性对
<正> 自《内经》以来,历代医家皆认为足临泣即是足少阳胆经的俞穴,五行属性为木。这主要是以《灵枢·本输》"胆出于窍阴,窍阴者,足小指次指之端也,为井金;溜于侠溪,侠溪,足小
期刊
随着经济全球化的不断深入,企业与企业之间的竞争已经转变为供应链与供应链之间的竞争。由于企业越来越重视对供应链的管理和风险的控制,对企业的风险导向审计也延伸至供应链
在当代社会科技技术的不断发展,以及计算机助设施AutoCAD技术的广泛运用下,数字化测图技术也在各个方面得到的广泛利用。然而,伴随着数字化测图软件、计算机和地面测量仪器的
随着能源危机愈演愈烈,人们致力于开发替代能源和新的储能技术。相变储能材料利用材料的相变潜热进行能量的储存和释放,控制周围环境温度的同时达到节约能源的目的,能够解决