Hadoop原理及优化分析

来源 :第十九届网络新技术与应用年会 | 被引量 : 0次 | 上传用户:wutiepeng
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文对Hadoop的工作原理及优化进行了一定程度的分析,可以得到,在进行大数据处理的时候,Hadoop的优势非常明显,能够给企业节省大量的资金,并且保证数据分析的效果,这是以往的方式所不具有的优点,但是它也具有一定的缺点,并通过对其自身参数的调整以及对任务调度算法的优化,来达到对Hadoop性能的优化,所以在利用Hadoop进行数据处理的时候,必须真正认识到优缺点,根据实际的情况和需要选择合适的方式进行数据处理,以帮助企业更好地进步和发展。
其他文献
在SLAM问题的研究中,需要机器人在未知环境中进行地图构建和即时定位导航.首先介绍了SLAM问题的产生和应用;接着简单介绍了基于单目和双目视觉的SLAM流程和算法,如MonoSLAM;
会议
各行政公署,各市、县人民政府,省政府各直属单位:经省政府同意,现将《黑龙江省续志工作规划 》印发给你们,请结合本地、本部门实际情况,认真贯彻实施.一九九八年十月十七日
文章简述了1024门/线ΔM综合交换机处理机系统的设计原理,并对处理机性能和多机通讯体系进行了讨论。 The paper briefly describes the design principle of 1024 gate / line ΔM
土壤作为人类赖以生存的物质基础,其质量的好坏在很大程度上影响着人类社会的发展。为了提升土壤环境质量水平,就需要做好土壤监测工作。但是实际当中由于场地污染特征分布不明
社会经济的迅猛发展推动各行各业也取得进一步发展,进入新时期,酒店经营管理需要积极适应社会经济的发展变化,提高自身管理水平,为顾客带来更加优质的住店体验,提高酒店自身竞争力
2013年7月27日,由石家庄铁道大学国防交通研究所研发的“SLJ900/32型流动式架桥机”通过河北省科技成果转化服务中心组织的专家鉴定。以中国工程院何华武院士为主任的专家委
在无线通信发展的背景下,网络接入方式也在发生变化,基于云无线接入的网络更加适应5G移动通信网络的发展,基于回程链路容量的资源分配方法已经得到一定程度的研究,但随着无线通信
鸡西矿业集团公司张辰煤矿西三采区3
期刊
在寒流突袭之际,股市暖风频吹,阳光普照,本刊读者已在享受投资蜜月的快乐。从1月底开始,本刊就特别策划了一系列“熊途末路”的专题文章,预示市场底部的来临,引起读者巨大反响。至此
提出了一种新式的在FPGA中实现的具有高速开关频率的降压变压器的有效方法.采用优化的滑模控制算法与片外数模转换器相结合的方式,系统具有良好的动态响应特性.与传统的数字