基于Hadoop的SQL查询引擎性能研究

来源 :华中师范大学学报：自然科学版 | 被引量 : 0次 | 上传用户：lunxyxd

【摘要】

：

Apache Hadoop处理超大规模数据集有非常出色的表现,相比较于传统的数据仓库和关系型数据库有不少优势.为了让原有业务能够充分利用Hadoop的优势,SQL-on-Hadoop系统越来越受

【作者】

：

吴黎兵邱鑫叶璐瑶王晓栋聂雷

【机构】

：

武汉大学计算机学院,英特尔英特尔亚太研发中心

【出处】

：

华中师范大学学报：自然科学版

【发表日期】

：

2016年2期

【关键词】

：

大数据 SQL-on-Hadoop 数据仓库 SPARK SQL IMPALA Hive big data SQL-on-Hadoop data warehou

【基金项目】

：

国家自然科学基金项目（61272112,61472287）, 湖北省自然科学基金重点项目（2015CFA068）

下载到本地 , 更方便阅读

下载此文赞助VIP

声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架

论文部分内容阅读

Apache Hadoop处理超大规模数据集有非常出色的表现,相比较于传统的数据仓库和关系型数据库有不少优势.为了让原有业务能够充分利用Hadoop的优势,SQL-on-Hadoop系统越来越受到工业界和学术界的关注.基于Hadoop的SQL查询引擎种类繁多,各有优势,其运算引擎主要包括三种：1传统的Map/Reduce引擎;2新兴的Spark引擎;3基于shared-nothing架构的MPP引擎.本文选取了其中最有代表性的三种SQL查询引擎—Hive、Spark SQL、Impala,并使用了一种类T

其他文献

企业增长阶段EVA虚拟股权现金兑现激励探讨

企业不同的生命周期阶段,需要不同的激励方式。企业增长阶段EVA虚拟股票期权是将专门提取的一部分税后利润和购买EVA虚拟股票期权的一部分奖金作为奖励基金,在确定的兑现时间

期刊

企业增长阶段EVA虚拟股票期权兑现价格:行权条件

浅谈做好基层动物防疫工作的措施

随着我国经济的快速发展,畜牧业的发展也得到了快速提升,为人们提供了大量的肉制品,同时也促进了区域经济的发展和社会的稳定。在此背景下,本文分析总结了做好基层畜牧兽医动

期刊

畜牧业动物防疫安全生产措施

采自湖北省的中国小蘑菇属新记录种——砖红小蘑菇

在湖北省十堰市龙泉寺旅游区采集到一株小蘑菇属Micropsalliota真菌,经鉴定为Micropsalliota lateritia Heinem.,为中国新记录种.该种的主要特征是子实体小,紫褐色,表面覆盖

期刊

砖红小蘑菇新记录种分类转录间隔区(ITS)Micropsalliota lateritia new record taxonomy internal t

血清人附睾分泌蛋白4和VEGF联合预测卵巢癌临床转归的价值分析

目的探究联合HE4和VEGF预测卵巢癌临床转归的价值。方法择取卵巢癌患者150例作研究组,同期选取150名健康女性作为对照组,检测入院时血清HE4和VEGF水平,研究组患者行手术治疗,

期刊

HE4VEGF卵巢癌HE4 VEGF Ovarian cancer

长江经济带新型城镇化时空格局演变及影响因素研究

从经济、人口、社会发展、基础设施、城乡统筹和生态环境等6个方面建立新型城镇化发展水平的评价指标体系,运用熵值法、空间自相关分析法和灰色关联分析法等方法对长江经济带

期刊

新型城镇化时空格局演变影响因素长江经济带new urbanization spatial-temporal pattern evolution infl

厦门市民宿的空间分布特征与影响因素研究

采取厦门市民宿POI数据,运用最邻近指数、核密度估计法、标准差椭圆法,研究厦门市民宿的总体集聚区、集聚中心与发展方向,并分析其影响因素.结果显示:思明区是厦门市民宿集聚

期刊

民宿空间格局点模式分析影响因素厦门市Bed and Breakfast (B&B)spatial patternpoint pattern a

不同稀释液对鸡精液低温保存影响的研究

本试验旨在研究不同稀释液对鸡精子活率的影响,试验配制了四种p H值接近的鸡精液稀释液,在37℃下每隔12 h测定一次精子活率,直到精子全部死亡,计算精子存活的时间以及生存指

期刊

鸡精子稀释液渗透压存活时间

参麦注射液治疗透析中低血压疗效观察

目的研究血液透析中应用参麦注射液治疗低血压的临床效果。方法我院选择128例血液透析中出现低血压的患者,对照组的64例患者实施常规的治疗,观察组的64例患者在常规治疗的基

期刊

参麦注射液血液透析低血压临床疗效Shenmai injection Hemodialysis Hypotension Clinical efficacy

54份哥伦比亚木薯种质的育种特性评价

资源是育种的基础，对引进资源进行科学的评价是确定育种方向的前提，也是加快育种进度的关键．该研究通过田间试验（1a）对引自哥伦比亚的54份木薯资源进行育种特性评价，通过对株高、块

期刊

木薯种质田间试验评价arctic Northeast Sea Route port of call fuzzy comprehensive evaluat

李朗国际珠宝产业园全球公开发售

深圳市中盈贵金属股份有限公司是由深圳市宝福珠宝首饰有限公司、深圳市翠绿珠宝首饰有限公司、深圳市甘露珠宝首饰有限公司等三家“中国名牌”企业及从事建筑行业多年的资深

期刊

珠宝产业珠宝首饰发售国际中国名牌生产基地深圳市核心竞争力

基于Hadoop的SQL查询引擎性能研究

与本文相关的学术论文